LLM 能读懂计算机架构论文吗？

Can LLMs Perform Deep Technical Comprehension of Computer Architecture Papers

LLM 真的能深度理解计算机架构论文吗？这项研究不仅关注摘要生成，更看重结构化批判能力。团队推出了开源工具 Gauntlet，通过五位独立专家角色和对抗性合成阶段来分析论文。在对比 ISCA 2025 和 HPCA 2026 的 20 篇论文时，人类评审在 15 次比较中更青睐 Gauntlet 的分析，尤其在严谨性上优势显著。研究揭示，人类的优势仅在于信任感和实用性，而非深度。多智能体架构是性能提升的关键，比单智能体模式强 96%。所有分析数据已开源，为社区提供宝贵资源。

"我们研究 Gauntlet，这是一个开源流程，通过五个独立的专家角色评审者和一个对抗性合成阶段来分析论文。"