Claude Codeの設定が静かに壊れていく問題を検出するCIツール「config-drift-checker」

I measured what my Claude.md, skills and hooks are worth

Claude Codeの設定(CLAUDE.md、スキル、フック)は、チームのコード生成の品質を左右する重要な設定ですが、モデルの変更やClaude Codeのリリース、チームメイトの編集によって静かに壊れていくことがあります。config-drift-checkerは、設定が本来果たすべき動作をテストケース化し、実際のエージェントを実行してスコアを継続的に記録します。Claude Codeのリリースや設定に触れるPRのたびに自動実行され、リグレッションを検出するとPRコメントやSlackアラートで通知します。さらに、プラグインの有無で同じテストを実行するアブレーション機能により、各スキルやフックの実際の貢献度を測定できます。

Claude Codeは、これを書く前の30日間に25のバージョンをリリースし、`sonnet`の背後にあるモデルは変更履歴なしにサーバー側で変更され、同僚が誰もテストしないPRでスキルを編集することができます。

この日のほかの記事

2026-08-27