ClaudeがN=4超ヤン=ミルズ理論を9ループまで計算、物理学者の挑戦に応える
Yes, Claude can do Nine Loops
理論物理学者Matt von Hippelが、AIが計算量的に困難な問題を解決できるか挑戦。Anthropicの物理学者Liam FitzpatrickとSiddharth Mishra-SharmaがClaude Scienceを使い、N=4超ヤン=ミルズ理論の9ループ振幅を計算。予算は約1000〜2000ドルで、96CPUを1週間動かすコストに相当。ブートストラップ法とフォームファクター法の2通りで結果を得た。人間もほぼ同時期に到達し、AIが既知の手法を効率的に実行できることを示した。
私の最大の収穫は、予想以上に低く垂れ下がった果実がたくさんあるということだ。目標が単純で明確であっても、専門家には実際よりもずっと達成不可能に見えることがある。
HNでの議論
56- mccoyb
ソーシャルメディア、OpenAI、Anthropicでこれらの投稿が重複していることはさておき（「すべてはモデル次第で、ただ続けろと言っているだけ」RLで何かを十分に打ち負かせば…それはやるだろう）
この投稿について私が引っかかるのは：
> 挑戦の精神に忠実に、彼らは何百万ドルもの計算能力を使わなかった。彼らはFable 5.1を使い、科学者が有料で利用できるプラットフォームClaude Scienceの中で作業した。
わかった、これらのエージェント的LMには何十億ドルも注ぎ込まれているんだろ？次の増分を得るための各トレーニング実行には何百万ドルもかかっているんだろ？
これは明らかにNavier-Stokesへの当てつけのように感じるが、計算が実際どこで使われているかを隠すために数字をすり替えているだけだ…計算は使われている。それはトレーニング中に事前に検索を賢くするための償却として使われるか、後で使われるかだ。
もう一つ気に入ったのは：科学者がAnthropicにお金を払って、彼らの特別な科学ハーネスの中で科学をするってやつ。まさに私が学部で物理学を専攻したときに夢見ていたことだよ、1社か2社が「進歩」の鍵を握り、月額サブスクリプションで提供するなんて。
- danvayn
いい記事だ。
> これが単にはるかにAIに優しい問題である可能性もあるが、私は単にそうだとは思わない。技術は本当に良くなっていると思う。
私も良くなっていると思う。ブログの著者は冒頭で2つのケースを挙げている——AIは頭打ちになると考える人々と、頭打ちにならないと考える人々。私の見方では、どちらも技術的には正しい——AIは人間の革新がそれを改善するまで、通常は何らかの上限に達する。AIは大規模に自己改善するというより、人間が改善する。
言い換えれば、AIは反復的に改善できるし実際にしているが、これまでに見つけて突破したすべての天井は人間の創意工夫や努力から来ている。それはおそらく今後も必要とされ続けるだろう、どれだけ自力でできるとしても。その点で、すべては必然的に「上限なし、上限に達するまで、そしておそらく最終的には人間によって（再び）上限がなくなる」ように思える。だから、時間が進み、問題が生じるたびに解決し続ける限り、AIは決してきれいに「上限なし」か「上限あり」のどちらかのバケツに完璧に収まることはないだろう。
- sandeepkd
まず第一に、LLMはほとんどすべての分野で何らかの形で間違いなく付加価値をもたらしている。
私が気になるのは、懐疑と批判を招くマーケティングの角度だ。
> AnthropicはMatt von Hippelを招いてこの投稿を書かせ、その時間に対して報酬を支払った。
もし誰かにお金を払い、議論を調整するなら、最終結果は常に自分を勝者として示す偏ったものになる。それがある程度自然発生的であることは理解しているが、それでもマーケティングと科学の比率はバランスが取れている必要がある。マーケティングは正確であるべきで、結果や成果は再現可能であるべきだ。
- 6thbit
> 結局のところ、人間にとっても結果はそれほど遠くはなかった。Anthropicから連絡を受けてから数日後、北京の中国科学院の振幅理論研究者であるSong Heから連絡があった。Songのグループはすでに結果の大部分を得ていた。彼らはGPT-6に基づくAI支援をいくつか使っていたが、Anthropicが使ったようなワンショットでほとんど人間なしのアプローチではなかった。
AIに、人間も同時に解こうとしているものではない何かを考え出させることはできないのか？
なぜAIラボが独自のミレニアム賞のようなチャレンジを提案しないのか不思議に思う。
- mrkn1
これには簡単な答えがあるはずで、おそらく私が見落としているだけだと思うが、超重力のやつはどうなった？
そして、これの前に何回の実行が必要だった？彼らは「ワンショットで」、ただ「続けろ」だけでやったと言う。しかし、我々が見るのは成功した実行だけであり、それを実行した人々によって報告されている。