Une nouvelle IA peut scanner le cerveau et produire la transcription des pensées : des scientifiques

• Les scientifiques disent avoir formé l’IA pour recréer une histoire à partir d’un scanner cérébral.
• Les participants se sont assis dans une machine IRMf pour écouter, regarder ou imaginer une histoire.
• L’IA a pu lire leurs ondes cérébrales et recréer l’histoire avec précision, selon une étude.

Les scientifiques ont utilisé l’IA pour lire les scanners cérébraux des gens et recréer toute une histoire uniquement à partir de leurs ondes cérébrales, selon une étude publiée lundi.

Les participants ont été invités à écouter, regarder ou imaginer une histoire alors qu’ils étaient assis dans un scanner cérébral appelé IRMf, selon l’étude d’experts de l’Université du Texas à Austin.

L’IA a pu prédire avec précision de quoi parlait l’histoire en ne lisant que les ondes cérébrales du participant, selon l’étude.

Ce type de technologie pourrait un jour aider les personnes qui ont perdu la capacité de communiquer, ont déclaré les scientifiques du projet.

“Pour une méthode non invasive, il s’agit d’un véritable bond en avant par rapport à ce qui a été fait auparavant, qui consiste généralement en des mots simples ou des phrases courtes”, a déclaré Alex Huth, professeur adjoint de neurosciences et d’informatique à l’UT Austin, dans un communiqué de presse.

L’histoire ne sort pas exactement comme elle a été racontée

Jerry Tang, Amanda LeBel, Shailee Jain et Alexander Huth/Initié

L’IA a pu recréer avec précision des histoires que les participants écoutaient, regardaient ou imaginaient, selon l’étude, qui a été publiée dans la revue à comité de lecture Nature Neuroscience.

L’IA n’a pas reproduit l’histoire mot pour mot. Au lieu de cela, il a repris les concepts déclenchés dans l’esprit des participants et a produit une approximation. Il a également fait quelques erreurs.

Par exemple, un participant entendait ceci : “Je ne savais pas si je devais crier, pleurer ou m’enfuir. Au lieu de cela, j’ai dit : ‘Laisse-moi tranquille !'”

Leurs ondes cérébrales ont été traduites en “A commencé à crier et à pleurer, puis elle a juste dit:” Je t’ai dit de me laisser tranquille “”, selon le communiqué de presse – brouillant le contexte des cris et des pleurs et qui parlait.

Les chercheurs ont également demandé aux participants de regarder une vidéo sans son. Ils ont découvert que leur décodeur IA était capable de capturer l’essence de la vidéo à partir des pensées des participants, comme le montre la transcription ci-dessous :

L’IA doit interpréter les scanners cérébraux

Certaines des différences entre l’histoire originale et l’histoire décodée à partir des ondes cérébrales peuvent être dues au modèle lui-même.

Chaque cerveau est différent, donc pour entraîner l’ordinateur, les scientifiques lui ont d’abord montré quelles ondes cérébrales apparaissaient lorsque le participant pensait à un mot particulier.

Mais ce n’est pas une science univoque. Lorsque l’ordinateur lisait les ondes cérébrales, il donnait quelques suggestions de mots qui auraient pu être pensés.

Les scientifiques ont ensuite demandé à l’IA de donner un sens aux mots produits par l’ordinateur à l’aide d’un modèle de transformateur, le même type de modèle que celui utilisé par ChatGPT.

“Nous obtenons le modèle pour décoder le langage continu pendant de longues périodes avec des idées compliquées”, a déclaré Huth.

La technique ne peut pas pénétrer dans les pensées privées

Alors que la technique était capable de lire dans les pensées, elle ne pouvait pas être utilisée pour pénétrer dans des pensées privées ou pour un interrogatoire, ont déclaré les scientifiques dans un communiqué de presse.

La machine était facilement dupe. Lorsque les scientifiques ont demandé aux participants de penser à une autre histoire, de compter ou de penser aux noms d’animaux pendant qu’ils écoutaient une histoire, la précision du décodeur a chuté, selon le communiqué de presse.

“Nous prenons très au sérieux les craintes qu’il puisse être utilisé à de mauvaises fins et avons travaillé pour éviter cela”, a déclaré l’auteur de l’étude Jerry Tang, doctorant en informatique, dans le communiqué de presse. “Nous voulons nous assurer que les gens n’utilisent ces types de technologies que lorsqu’ils le souhaitent et que cela les aide.”

Contrairement à d’autres techniques, cette méthode n’utilise pas d’implants cérébraux

Des études antérieures ont affirmé qu’ils pouvaient lire dans l’esprit des patients atteints du syndrome d’enfermement. C’était le cas d’un homme de 34 ans qui était complètement paralysé et avait même perdu la capacité de bouger les yeux.

Selon une étude précédente du Wyss Center for Bio and Neuroengineering et de l’Université de Tübingen en Allemagne, l’homme était capable de communiquer et même de demander de la musique et de la bière.

Mais ces études antérieures reposaient généralement sur des implants cérébraux insérés chirurgicalement.

La différence ici est que cette méthode ne repose que sur des scanners cérébraux, qui ne sont pas invasifs.

Bien sûr, cela signifie que pour l’instant, la technique nécessite une énorme machine et ne peut pas être utilisée en dehors d’un laboratoire. Mais les scientifiques espèrent que la méthode pourrait devenir plus portable à l’avenir avec une technologie plus compacte, selon le communiqué de presse.