Des scientifiques néerlandais ont développé une intelligence artificielle (IA) innovante qui peut reconstituer visuellement ce qu’une personne a vu, en analysant uniquement son activité cérébrale.
L’Université Radboud aux Pays-Bas a récemment partagé les résultats prometteurs de leur dernière recherche sur l’IA. Leur étude, publiée sur bioRxiv, décrit comment ils ont employé une IA pour recréer des images observées par des individus en se basant sur leurs activités cérébrales.
Le groupe Meta, maison mère de plateformes telles que Facebook et Instagram, a également travaillé sur une technologie similaire, capable de « visualiser » les pensées.
Origine et méthodologie des données
Les données utilisées dans cette recherche proviennent de deux études distinctes. La première étude a capturé l’activité cérébrale de trois participants au moyen de l’imagerie par résonance magnétique fonctionnelle (IRMf) pendant qu’ils visualisaient une sélection de photographies. La seconde étude a impliqué un macaque, équipé d’électrodes directement implantées dans le cerveau, regardant des images générées par IA.
Comparaison et résultats
Les résultats montrent des images fortement similaires aux originaux, en particulier celles reconstruites à partir de l’activité cérébrale du macaque. Ce succès est attribué en partie aux méthodes de capture, les électrodes générant moins de « bruit » comparativement à l’IRMf. Le fait que le macaque ait regardé des images produites par une IA pourrait également avoir facilité la reconstruction, car l’IA peut mieux interpréter la manière dont les images ont été structurées.
Intégration des mécanismes d’attention prédictifs
Dans cette nouvelle étude, les chercheurs ont amélioré l’IA en y intégrant des mécanismes d’attention prédictifs (PAM). Ces mécanismes ont aidé à identifier les signaux cérébraux les plus pertinents pour la reconstruction des images. Les données d’activité cérébrale ont été transformées en vecteurs latents puis traitées par un réseau antagoniste génératif.
Objectifs futurs
Le but principal de cette recherche est de développer des implants capables de restaurer la vue en stimulant les régions du cerveau associées à la reconnaissance visuelle des objets. Cette technologie pourrait révolutionner le traitement des déficiences visuelles et ouvrir de nouvelles voies pour comprendre le fonctionnement cérébral.
