Note : Rapport provenant d'une seule source ; en attente de corroboration.
Une équipe de l'Université de Californie à San Francisco (UCSF), financée par les Instituts nationaux de la santé (NIH), a mis au point une interface cerveau-ordinateur (ICO) permettant aux personnes atteintes de paralysie des cordes vocales et du haut du corps de communiquer simultanément par la parole et les gestes du haut du corps. Il s'agit du premier système d'ICO connu capable de permettre ces deux modes de communication simultanément, reproduisant fidèlement l'expression naturelle.
Des chercheurs ont utilisé l'apprentissage automatique pour décoder l'activité cérébrale spécifique correspondant à la combinaison de la parole et des gestes chez trois patients. Deux participants ont contrôlé en temps réel un avatar virtuel personnalisé représentant l'ensemble du corps grâce à une interface cerveau-machine (ICM), traduisant leur activité cérébrale en commandes vocales et gestuelles.
L'étude portait sur des patients paralysés suite à des affections telles que la sclérose latérale amyotrophique (SLA) et les accidents vasculaires cérébraux du tronc cérébral, qui altèrent gravement la communication verbale et non verbale. Les dispositifs de suivi oculaire actuels permettent la synthèse vocale, mais leur vitesse et leur expressivité sont limitées, et leur utilisation peut être physiquement éprouvante.
Les chercheurs ont implanté de fines matrices de capteurs d'électrocorticographie (ECoG) sur le cortex moteur des participants. Des travaux antérieurs de l'UCSF avaient permis de traduire les signaux cérébraux en expressions faciales numériques, mais cette étude a étendu cette approche aux gestes des membres supérieurs grâce à un avatar virtuel complet. Les participants ont réalisé ou tenté de verbaliser des phrases et des gestes, tels que des salutations de la main ou des signes de pouce levé, séparément et simultanément, permettant ainsi la collecte de données pour leur décodage.
Selon l'auteur principal de l'étude, Edward Chang, MD, professeur de neurochirurgie à l'UCSF, les résultats fournissent une preuve de concept selon laquelle les interfaces cerveau-machine peuvent restaurer une certaine liberté et flexibilité dans la communication en engageant l'ensemble du cortex moteur dans un processus dynamique à plusieurs niveaux.