ClickHouseがPostgresの物理WALを直接読み取り、200msで分析可能に
WalShadow: Sub-second Postgres replication to ClickHouse from physical WAL
ClickHouseがオープンソースのWalShadowを発表。Postgresの物理WALを直接消費し、論理レプリケーションを介さずにClickHouseネイティブブロックへ変換する。ベンチマークではコミットから可視化まで約200ms、秒間289K行を処理し、ソースのPostgresとほぼ同等の性能を実現。スキーマ変更や再起動復旧にも対応し、GitHubで公開中。
WalShadowはPostgresからClickHouseへのレプリケーションに新しいアプローチをとり、事実上ClickHouseを分析用の物理スタンバイに変える。