非侵襲的EEGで黙読中の単語を解読、オープン語彙で240,000単語を記録
Decoding silent reading from non-invasive EEG
非侵襲的な脳波（EEG）による内言の解読は、自発的な内言と脳活動のペアデータを収集できないという根本的な問題を抱えています。本研究では、黙読をスケーラブルな代理タスクとして用い、対照学習（CLIPスタイル）で訓練した畳み込みエンコーダとトランスフォーマーが、単一被験者から約49時間・393ランで収集した約24万単語の提示から、どの程度の語彙・意味情報を抽出できるかを検証しました。その結果、単語レベルのデコードは偶然を上回り、中頻度・低頻度語にも拡張され、データ量に対して対数線形的にスケールし、飽和の兆候は見られませんでした。後頭部・側頭後部の電極を除去すると単語レベルの利得は約3分の1減少しましたが、文脈追跡は不変でした。これらの結果は、EEGによる黙読中のオープン語彙の単語情報の回復可能性を示し、デコードが飽和ではなくデータ制限的であることを示唆します。
これらの結果は、オープン語彙の単語レベルの情報が黙読中のEEGから回復可能であり、デコードが飽和ではなくデータ制限的であることを確立しています。
HNでの議論
33- dustfinger
権利章典とカナダ権利自由憲章に「私的思考の権利」を加え、可能な限り他国の権利・自由法にも同様のものを加えると良いでしょう。
- PMunch
適切なサブボーカリゼーション・インターフェースがあれば、とてもクールでしょうね！ただ、19チャンネルのEEGは少し侵襲的に思えます（社会的な観点から言って、ここでは医療的な文脈で使われていると理解していますが）。
- SubiculumCode
彼らが約15%の単語予測精度を主張していると読んでいいのでしょうか？
- b00ty4breakfast
トーメント・ネクサス産業複合体は成長し続けています。こういった研究に携わる研究者たちとぜひ話をしてみたいものです。この研究が切り開く周辺的な道筋もあるでしょうが、自分たちが実現に向けて働いている明らかなディストピアをどうやって無視できるのでしょうか？STEM教育で人文科学を軽視することは、災難になりつつあります。
- tbenst
言い換えれば、EEGは512候補単語の中からトップ10を検索する精度を20.3%から27.7%に引き上げるものです。とても「オープン語彙の単語解読」とは言えません。また、この論文には、Llamaに先行する正解テキストを入力し、同じ候補セットの中で現在の単語をどの程度ランク付けするかを問うという重要な対照実験が欠けています。