别忽视界面:AI 无法绕过点击
You can't solve computer use by ignoring the interface

尽管 LLM 在对话中表现惊艳,但在实际操作电脑时却频频受挫。在 OSWorld-V2 等基准测试中,顶级模型的完成率仅约 20%。问题在于,这些智能体往往试图绕过界面,通过调用 API 或编写 JavaScript 来完成任务,而非像人类一样直接点击按钮。这种“作弊”策略在真实场景中不仅不可靠,还消耗了大量算力。Steelman Labs 指出,单纯堆砌模型参数已走入死胡同。真正的突破在于将规划与执行分离,构建具备人类级反应速度和运动控制能力的 System 1,让智能体能够真正驾驭任何界面,而非绕道而行。
我们使用万亿级推理模型去绕过点击操作,这才是代理式电脑使用的核心问题。