공상 과학 영화의 "마음 읽기 기술"은 현실이되고있는 것 같습니다! Yale University, Dartmouth College 및 Cambridge University의 과학자들은 기능적 자기 공명 영상 (FMRI)에 의해 스캔 된 뇌 신호를 인간 이해할 수있는 텍스트로 직접 디코딩 할 수있는 MindlLM이라는 AI 모델을 공동으로 개발했습니다. 이 혁신적인 기술은 사람들이 미래가 조용히 도착했다고 한숨을 쉬게합니다.
복잡한 뇌 활동을 단어로 바꾸는 것은 항상 신경 과학 분야에서 큰 도전이었으며 에베레스트 산을 등반하는 것만 큼 어렵습니다. 이전 기술은 예측이 좋지 않았거나 간단한 작업 만 처리 할 수 있었으며 피험자에 대한 다재다능 성이 거의 없었습니다. 그러나 Mindllm의 출현은이 상황이 완전히 바뀌 었습니다.
Mindllm은 뇌의 활동을 이해할 수있을뿐만 아니라 주제와 주제에 의해 제한되지 않고 단어로 전환 할 수있는 "슈퍼 번역가"와 같습니다. 이 획기적인 획기적인 획기적인 연구자들이 개발 한 뇌 교육 조정 (BIT) 기술 덕분에 Mindllm은 FMRI 신호에서 시맨틱 정보를보다 정확하게 캡처하여 디코딩 기능을 크게 향상시킬 수 있습니다.
실제 테스트에서 Mindllm의 성능은 훌륭했습니다. 다양한 FMRI에서 텍스트 작업 중에서 성능은 이전 모델을 훨씬 능가하며 다운 스트림 작업이 12.0%향상되었으며 알려지지 않은 주제의 일반화 능력은 16.4%증가했으며 새로운 작업의 적응성은 25.0%증가했습니다. 이 "All-Round Academic Master"의 성과는 의심 할 여지없이 Brain-Computer Interface 기술을위한 새로운 가능성을 열었습니다.
Mindllm은 광범위한 응용 프로그램 전망을 가지고 있습니다. 실어증 및 근 위축성 자궁 경부와 같은 언어 장애가있는 환자의 경우 자신을 표현하고 세상과 다시 연결하는 능력을 회복하는 데 도움이 될 것으로 예상됩니다. 건강한 사람들에게 Mindllm은 "마인드 컨트롤"디지털 장치의 문을 열었으며 AI를 제어하거나 보철물을 제어하는지 여부는 더 자연스럽고 인간이 될 것입니다.
Mindllm의 성공은 "내부 및 외부"디자인과 분리 할 수 없습니다. 복잡한 FMRI 신호에서 뇌 활동의 주요 특징을 정확하게 추출하고 다른 대상에 적합한 대상 독립적 인 FMRI 인코더를 사용합니다. 동시에 추출 된 EEG 기능을 인간 언어로 부드럽게 변환 할 수있는 큰 언어 모델 (LLM)이 장착되어 있습니다.
디코딩의 정확성과 다양성을 더욱 향상시키기 위해 연구원들은 또한 BIT (Brain Erserction Addrenment) 기술을 개발했습니다. Mindllm은 중재와 같은 이미지를 통해 인식, 기억, 언어 및 추론을 포함한 다양한 작업을 배울 수 있으므로 뇌 의미 정보에 대한 이해를 포괄적으로 향상시킬 수 있습니다.
엄격한 테스트에서 Mindllm은 기대를 넘어서서 모든 지표에서 기준선 모델을 능가 할뿐만 아니라 다양한 새로운 작업에 효과적으로 적응하여 놀라운 소성과 유연성을 보여주었습니다. 또한 연구원들은 Mindllm의주의 메커니즘을 깊이 분석하고 의사 결정 과정이 해석 가능하다는 것을 발견하여 뇌의 작동 방식에 대한 귀중한 통찰력을 제공합니다.
Mindllm의 탄생은 의심 할 여지없이 fMRI에서 텍스트 디코딩에 이르기까지 이정표 혁신입니다. 그것은 디코딩의 정확성과 보편성을 크게 향상시킬뿐만 아니라 미래의 뇌-컴퓨터 인터페이스 기술의 발달에 대한 무한한 상상력을 발화시킵니다. 아마도 가까운 시일 내에 "아이디어의 해석"은 더 이상 공상 과학 영화의 장면이 될 것이지만, 진정으로 우리의 삶에 들어가 새로운 컴퓨터 상호 작용의 새로운 시대를 열 것입니다.
종이 링크 : https://arxiv.org/abs/2502.15786