LLMレビューが人間の研究者を上回る：コンピュータアーキテクチャ論文の深い理解

Can LLMs Perform Deep Technical Comprehension of Computer Architecture Papers

LLMはコンピュータアーキテクチャ論文を要約するだけでなく、核となるメカニズムを特定し、暗黙の前提を明らかにし、貢献を文脈に位置づける構造化批評ができるのか？この研究では、5つの独立した専門家ペルソナと敵対的統合段階を備えたオープンソースパイプラインGauntletを紹介する。ISCA 2025とHPCA 2026の論文20本を対象に、10人の研究者が独自の分析とGauntletの分析を比較したところ、15件でGauntletが優先され、特にCritical Rigorで優位だった。98論文の自動アブレーションでは、マルチエージェント構造、特に統合パスが性能向上に寄与することが示された。