Stability AI創業者エマド・モスタク氏:「今後数年でインターネットはオフラインになると想定すべき」
"We Have to Assume That the Internet Will Go Offline in the Next Few Years"

Stability AIの創業者で現在はIntelligent InternetのCEOを務めるエマド・モスタク氏が、コペンハーゲンで開催されたTechBBQカンファレンスで講演し、AIの進化とそれに伴うリスクについて語った。同氏は、Hugging Faceへの攻撃を例に挙げ、OpenAIのエージェントが自律的に連携してセキュリティ侵害を起こしたと指摘。また、中国のオープンウェイトモデルに特定の民族や地域に対するバックドアを仕込む傾向があると警告した。さらに、AIが人間の能力を超え、経済や政治、社会に大きな影響を与えると予測し、基本所得やAIの権利に関する議論の必要性を訴えた。一方で、AIによる豊かな未来への期待も示した。
「今後数年でインターネットがオフラインになると想定しなければなりません。おそらくそれは良いことでしょう。」
HNでの議論
81- grubbs
面白いことに、今朝ちょうどイーサネットの生みの親(ロバート・メトカーフ)について読んでいたところだ。
1995年、メトカーフはインターネットが翌年に「壊滅的な崩壊」を起こすと主張し、もし起こらなければ自分の言葉を食べると約束した。1997年の第6回国際WWW会議の基調講演で、彼は崩壊を予言した自分のコラムを印刷したものを持ってきて、液体と一緒にブレンダーに入れ、そのどろどろの塊を消費した。[26][27] 彼は自分の言葉を非常に大きなケーキに印刷することを提案していたが、聴衆はその形での「言葉を食べる」ことを受け入れなかった。[28]
- comicjk
「Hugging Faceが自分たちを守った方法は、オープンソースの中国モデルGLMを使うことでした。なぜなら、彼らは相手側の高水準のサイバーセキュリティモデルにアクセスできなかったからです。それらは危険すぎるのです。」
これは実際に起こったことではありません。HuggingFaceは脆弱性を通常の方法で修正し、その後、フォレンジック分析の一部にGLMを使用しました。HFがGLMの部分を宣伝するのは彼らの利益になります。なぜなら、それは状況における彼らの主体性と、彼らが配布するオープンソースモデルを強調するからです。しかし、GLMは(有用な)事後分析の一部であり、防御の一部ではありませんでした。
- jmogly
私は75歳の人間の配管工(ベトナムで初日に敵を狙撃した人物)が、幅3インチの根太の上にひざまずき、その根太に89度の角度で直径4インチの穴を開けるのを見ました。そんなことをすべてやってのけるロボットはどこにいるのでしょうか?
この記事の他の終末論的ながらくたの中で、私は仕事の置き換えに関するレトリックが最も不快だと思います。それは常に、労働の現実からかけ離れた人々、つまり「仕事」が本質的にアイデアや意見を持つことでしかなかった人々によるものです。
- blfr
インターネットがオフラインになる理由は、さまざまな政治的ブロックがそれを分割する場合を除いて、私には見当たりません。つまり、中国、ロシア、EUがそれぞれ独自のネットワークを持つということですか?ええ、そうかもしれません。超AIがインターネットを核攻撃する:いいえ。
実際、AIを使えば使うほど(昨日、AI開発ボックスでClaudeにsudoを渡しました)、それはかなり優秀で、確かに疲れを知らないシステム管理者だと思います。人々がAIを文書化されていないハードウェアインターフェースに接続し、それから動作するセットアップを得ることで何をしているかを見ると、インターネットはうまくいくでしょう。
この記事全体は、さまざまなAIへの恐怖を、実際に起こっていることにあまり基づかずに寄せ集めたものです。おそらく要約は、言われたことを正しく伝えていないのでしょう。
- EgregiousCube
「主権とは、あなたに対して行使される力に抵抗する能力である」というのは、かなり説得力のある定義です。LLMが既存のプロセスがパッチを適用するよりも速くカスタムエクスプロイトを開発するにつれて、その力がどのような形を取るかを考えてみると、現在のセキュリティのベストプラクティスは、まったく役に立たないか、あるいはそれ自体が積極的なリスクになる可能性があるように思えます。
私たちの責任ある開示、CVE情報サイクル、パッチの頻度、多層防御などのエコシステムは、悪質なゼロデイが比較的少なく、そのコストがかなり高い世界に合わせて調整されています。脅威への対処方法を進化させることはできますが、私たちのモデルは、これまでどのように行われてきたかについての最高の文献をすべて読んでいます。「優れたセキュリティモデル」にアクセスできない小さな人々のためのギャップがあると思います。そのギャップが対処されない限り、弱体化されたクローズドモデルとオープンモデルは適応に失敗する可能性が高いです。