AI 垃圾内容竟拿下DeepMind大奖

Blatant AI slop just won a 25k USD DeepMind Kaggle Grand Prize

DeepMind在Kaggle举办的AGI认知能力黑客松结果出炉，超过1000支队伍角逐。令人震惊的是，部分获奖项目被社区质疑为“AI生成的垃圾内容”，却仍斩获2.5万美元大奖。比赛旨在设计超越简单记忆召回的基准，真正评估前沿模型的推理、行动与判断力。从MEDLEY-BENCH的社会压力测试，到LearningBench的即时学习能力，再到GAUGE对模型自信度的深度剖析，这些项目试图揭开LLM在元认知、执行功能和社会认知层面的真实水平。尽管争议不断，这场竞赛无疑推动了AI评估标准向更深层的认知维度迈进。

"现有的基准测试衡量的是模型已经知道什么，而LearningBench衡量的是它们如何在单次对话中从零开始学习全新的系统。"