Ploy 迁移到 GPT-5.6:快2.2倍,省27%
Migrating a production AI agent to GPT-5.6: 2.2x faster, 27% cheaper

我们终于把 Ploy 的生产级 AI 代理从 Claude Opus 切换到了 GPT-5.6 Sol。这次迁移带来了立竿见影的效果:构建速度提升了 2.2 倍,成本降低了 27%,且代码更精简。但过程绝非一帆风顺,我们发现评估框架本身往往偏向旧模型,导致新模型在初期被误判。更棘手的是,GPT-5.6 在工具调用和 Prompt caching 机制上与 Claude 存在巨大差异,比如它倾向于填满所有可选参数,甚至让文件读取失效。通过重构 Schema 和缓存策略,我们成功驯服了这些特性,让 GPT-5.6 真正发挥了其高效能。
"你的评估框架是为当前模型量身定制的,而你对此一无所知。"