Litestreamって何？

Litestreamとは何か、を説明する機会が増えてきたので、改めて私の理解をここに書いておきます。

Litestream？

Litestreamは、SQLite向けのバックアップツールです。
Litestreamはバックグラウンドで動き、SQLite APIでSQLiteと通信してバックアップを取得します。それをS3のようなストレージサービスにストリーミングすることで障害発生時に復旧しやすくします。

GitHub

GitHub - benbjohnson/litestream: Streaming replication for SQLite.

https://github.com/benbjohnson/litestream

Streaming replication for SQLite. Contribute to benbjohnson/litestream development by creating an account on GitHub.

LitestreamとFly.io

Litestreamは、2020年ごろにBen Johnson氏が開発したもので、今、Ben Johnson氏は、Fly.io社に勤務しながらLitestreamを開発しているようです。

Fly

Litestream VFS

https://fly.io/blog/litestream-vfs

Query your SQLite database any time, anywhere

というか、Ben Johnson氏はFly.io社のVP of Productらしいですね。

THE ORG

Ben Johnson - VP of Product at Fly.io | The Org

https://theorg.com/org/fly-io/org-chart/ben-johnson

Ben Johnson is an experienced technology professional with a diverse background in product development, software engineering, and database management.

どうやって使うの？

ミニマムな方法は以下のあたりに書いてあります。

litestream.io

Replicating to Amazon S3

https://litestream.io/guides/s3/#command-line-usage

This guide will show you how to use Amazon S3 as a database replica path for Litestream. You will need an Amazon AWS account to complete this guide.Setup Create an IAM user You will need to set up a user with programmatic access to work with Amazon S3. From the AWS Console, go to the IAM service. Next, click Users from the left-hand navigation and then click the Create user button.

インストールは公式の手順に従ってもらうとして、AWS S3の場合は、IAMのユーザーを追加して環境変数で認証情報を渡して、ファイルを指定してレプリケーションを開始するだけです。

# 認証情報を環境変数で渡す
export LITESTREAM_ACCESS_KEY_ID=あなたのキー
export LITESTREAM_SECRET_ACCESS_KEY=あなたのシークレット

# DBをS3へ継続レプリケーション開始（このプロセスは動かしっぱなし）
litestream replicate /path/to/db s3://BUCKETNAME/PATHNAME
Code language: PHP (php)

Linuxで使う場合は、ここら辺でsystemdで起動する方法も書いてますし、その場合は設定ファイルから各種情報を読み込めます。

litestream.io