MinD-Vis pourrait être développé pour s’intégrer dans les casques de réalité virtuelle, avec l’idée que les utilisateurs pourraient contrôler le fait d’être dans un métaverse avec leur esprit.
Des chercheurs de Singapour ont développé un système d’IA pour déchiffrer les modèles d’ondes cérébrales et générer une image de ce qu’il détermine qu’une personne regarde.
L’équipe de recherche recueille des ensembles de données d’analyse cérébrale d’environ 58 participants qui sont exposés à entre 1 200 et 5 000 images différentes d’animaux, de nourriture, de bâtiments et d’activités humaines pendant qu’ils reçoivent une IRM.
Chacun dure 9 secondes avec une pause entre les deux.
L’IA de lecture mentale, surnommée MinD-Vis, associe ensuite les scans cérébraux aux images pour générer un modèle d’IA individuel pour chaque participant.
Ces modèles permettent aux ordinateurs de « lire » les pensées et de recréer les visuels qu’une personne regarde.
« Il peut comprendre vos activités cérébrales tout comme ChatGPT comprend les langages naturels des humains. Et ensuite, il traduira vos activités cérébrales dans un langage que Stable Diffusion (une IA open source qui génère des images à partir de texte) peut comprendre », a déclaré l’un des les chercheurs principaux de l’étude et doctorant, Jiaxin Qing, de l’Université chinoise de Hong Kong (CUHK IE).
Selon Qing, les images décodées étaient systématiquement similaires à ce qui était montré aux participants.
Li Ruilin est l’un des participants et est fasciné par le décodage cérébral.
« Ce décodage cérébral, comme l’utilisation de signaux cérébraux pour générer les modalités naturelles, est un travail très intéressant et passionnant. Je m’intéresse également à ce qui s’est passé dans mon cerveau, à ce que mon cerveau peut produire et à ce que je pense », a déclaré Ruilin.
La technologie peut être appliquée pour aider les gens à l’avenir, selon l’équipe de recherche.
« Disons pour certains patients sans capacité motrice. Peut-être pouvons-nous l’aider à contrôler leurs robots (membres artificiels)… (ou) à communiquer avec les autres en utilisant simplement leurs pensées au lieu de la parole si cette personne ne pouvait pas parler à ce moment-là, », a déclaré Chen Zijiao, de l’École de médecine de l’Université nationale de Singapour.
Chen a ajouté que la technologie pourrait également être développée pour s’intégrer dans les casques de réalité virtuelle, afin que les utilisateurs puissent contrôler le fait d’être dans un métaverse avec leur esprit au lieu de contrôleurs physiques.
Défis futurs
Les chercheurs affirment que le développement de leur IA de lecture mentale est désormais dû à la disponibilité plus facile de la collecte d’ensembles de données IRM et également aux récentes avancées en matière de puissance de calcul pour analyser les données.
Cependant, il faudra de nombreuses années d’avancées pour que MinD-Vis lise dans les pensées du public, selon l’équipe.
« Nous essayons de tester la possibilité en ce moment, mais je dirai en termes d’ensemble de données actuellement disponible, la puissance de calcul dont nous disposons, ainsi que l’énorme hétérogénéité ou les différences interindividuelles dans notre anatomie cérébrale ainsi que fonctionnement du cerveau ; cela va être très, très difficile », a déclaré Juan Helen Zhou, professeur associé à l’Université nationale de Singapour.
Il existe également un risque que les ensembles de données tirés de l’IA soient partagés sans consentement. Les chercheurs ont également reconnu que le manque relatif de législation dans la recherche sur l’IA pourrait être un obstacle au progrès.
« Les problèmes de confidentialité sont la première chose importante, puis les gens pourraient s’inquiéter de savoir si les informations que nous avons fournies ici pourraient être évaluées ou partagées sans consentement préalable. Donc, la chose à résoudre est que nous devrions avoir des directives très strictes, éthiques et légales en termes comment protéger la vie privée », a déclaré Zhou.
Pour en savoir plus sur cette histoire, regardez la vidéo dans le lecteur multimédia ci-dessus.
