Opus 5.5はリリース後に密かに劣化したのか？ 毎日計測するベンチマーク「livenerf」が始動
Livenerf: Has Opus 5.5 been nerfed yet?
AnthropicがOpus 5.5をリリースした2026年9月22日から、毎日同じ問題を解かせて性能変化を追跡するベンチマークlivenerfがスタートした。リリース後にモデルが静かに劣化するという噂を、統計的に検証するのが目的だ。30日間でベースラインと比較し、精度低下や出力トークンの減少を検出する。
モデルを決定論的にすることはできない。サンプリングパラメータは消え、思考をオフにすることもできない。だからlivenerfは、それ以外のすべてを決定論的にする。