Snapcompact: SoTA Compaction – Instant, Local, Free
Snapcompactは、ストレージのコンパクションを瞬時に、ローカルで、無料で実現する最新技術（SoTA）を紹介する。本記事では、従来のコンパクション手法が抱えるレイテンシやコストの問題を解決し、データベースや分散システムにおけるパフォーマンスを飛躍的に向上させる手法について解説する。
背景メモ
- 「コンパクション（Compaction）」は、ログ構造化マージツリー（LSM-Tree）型データベース（例：RocksDB、LevelDB、ScyllaDB）で書き込み性能を保つために必須のバックグラウンド処理。古いデータをマージ・整理して読み取り効率を維持するが、従来はI/O負荷が高く「書き込み増幅（write amplification）」の主因だった。
- can.ac は Can Berk Güder氏の個人ブログ。同氏はCloudflareやKlaviyoで分散ストレージ・データベースの中核開発を担当したエンジニア。
- 「Snapcompact」は同氏が考案した新しいコンパクション手法。スナップショット分離（Snapshot Isolation）を活用し、ほとんどのコンパクション作業をメモリ上で瞬間的に完了させる点が従来と根本的に異なる。ディスクI/Oを劇的に削減できる可能性がある。
- 現時点では概念実証（PoC）段階だが、実用化されればLSM-Treeベースのデータベース全般（分散KVS、時系列DBなど）の運用コストとレイテンシに大きな影響を与えうる。