SF映画の「マインドリーディングテクニック」は現実になっているようです!イェール大学、ダートマスカレッジ、ケンブリッジ大学の科学者は、機能的磁気共鳴画像法(fMRI)によってスキャンされた脳信号を人間に理解しやすいテキストに直接デコードできるMindllmと呼ばれるAIモデルを共同で開発しました。この画期的なテクノロジーは、未来が静かに到来したことを人々にため息をつきます。
複雑な脳の活動を言葉に変えることは、神経科学の分野で常に大きな挑戦であり、エベレスト山を登るのと同じくらい困難です。以前の手法は、予測が不十分であるか、単純なタスクのみを処理することができ、被験者間で汎用性がほぼゼロでした。しかし、Mindllmの出現はこの状況を完全に変えました。

Mindllmは、脳の活動を理解するだけでなく、主題や主題によって制限されることなく言葉に変換できる「スーパー翻訳者」のようなものです。このブレークスルーは、研究者によって開発された脳指導調整(BIT)テクノロジーのおかげであり、MindllmはfMRI信号のセマンティック情報をより正確にキャプチャできるようになり、それによりデコード機能が大幅に改善されます。
実際のテストでは、Mindllmのパフォーマンスは驚くべきものでした。さまざまなfMRIからテキストタスクの中で、そのパフォーマンスは以前のすべてのモデルをはるかに超えており、ダウンストリームタスクは12.0%改善され、不明なトピックの一般化能力が16.4%増加し、新しいタスクの適応性が25.0%増加しました。この「オールラウンドのアカデミックマスター」のパフォーマンスは、間違いなく脳コンピューターインターフェイステクノロジーの新しい可能性を開きました。

Mindllmには幅広いアプリケーションの見通しがあります。失語症や筋萎縮性子宮頸部などの言語障害のある患者の場合、自分自身を表現して世界と再接続する能力を取り戻すのに役立つことが期待されています。健康な人にとって、Mindllmはまた、デジタルデバイスを「マインドコントロール」するための扉を開いており、AIを制御するか補綴を制御しているかどうかにかかわらず、より自然で人間になります。
Mindllmの成功は、「内部と外部の両方の」デザインと分離できません。複雑なfMRIシグナルから脳活動の重要な特徴を正確に抽出し、異なる被験者に適した主題に依存しないfMRIエンコーダーを使用します。同時に、抽出されたEEG機能を人間の言語にスムーズに変換できる大きな言語モデル(LLM)が装備されています。
デコードの精度と汎用性をさらに向上させるために、研究者は脳指導調整(BIT)テクノロジーも開発しました。調停としての画像を通じて、Mindllmは、知覚、記憶、言語、推論など、さまざまなタスクを学ぶことができ、それにより脳の意味情報の理解を包括的に改善できます。
厳密なテストでは、Mindllmはすべてのインジケーターでベースラインモデルを上回るだけでなく、さまざまな新しいタスクに効果的に適応し、驚くべき可塑性と柔軟性を示しています。さらに、研究者はまた、Mindllmの注意メカニズムを深く分析し、その意思決定プロセスが解釈可能であることを発見し、脳の仕組みに関する貴重な洞察を提供します。
Mindllmの誕生は、間違いなくFMRIからテキストデコードまでのマイルストーンのブレークスルーです。デコードの精度と普遍性を大幅に改善するだけでなく、脳コンピューターインターフェイステクノロジーの将来の発展のための無限の想像力に火をつけます。おそらく近い将来、「アイデアの解釈」はもはやサイエンスフィクション映画のシーンではなく、本当に私たちの生活に入り、人間コンピューターの相互作用の新しい時代を開きます。
紙のリンク:https://arxiv.org/abs/2502.15786