システムプロンプトで指示を4回繰り返すと効果が最大化、5回目以降は無駄

Say It Four Times (In Your System Prompt)

システムプロンプトで指示を4回繰り返すと効果が最大化、5回目以降は無駄

AIコーディングエージェントに関する俗説を週末に検証する連載の第1回。システムプロンプトで指示を繰り返すと本当に効果があるのかを、Gemini 2.5 Flashを使って1,080回の実行でテストした。その結果、指示を1回言うと74%の遵守率だったのが、4回で97%に達し、それ以上繰り返しても改善は見られなかった。さらに、モデルがルールを別のカテゴリ(docstringは文字列ではない)として扱うため、特定の場所だけ違反が残ることも判明。プロンプト変更の評価には複数回の実行が必要だと結論づけている。

4回を超えると、線は横ばいになります。8回も16回も4回と同じ範囲に収まります。私が予想した低下は現れず、正直言って、このサンプルサイズでは小さな低下を見逃す可能性もあります。
  1. zknill

    「4回目あたりで効果が切れる、平均値は誰に効いたかを隠してしまう」みたいなAI語りには本当にうんざりする。

    これは典型的なClaudeの話で、著者は自分の言葉を読んだり編集したり投資したりしていないんじゃないかと思わせる。

  2. leecommamichael

    > 平均値は誰に効いたかを隠してしまう。

    ふざけんな。もうこんなクソみたいな字幕すら読み通せないよ。

  3. joaquincabezas

    ビートルジュース、ビートルジュース、ビートルジュース…ビートルジュース

この日のほかの記事

2026-08-23