Год назад команда исследователей из Калифорнийского университета в Сан-Франциско показала возможности экспериментального интерфейса мозг-компьютер по распознаванию слов. Тогда имплант, помещенный в речемоторной части мозга парализованного человека смог уловить и дешифровать при помощи языкового моделирования 50 наиболее распространенных слов, когда пациент просто думал о них. Новая версия нейропротеза более совершенна – она считывает слова по буквам, а потому почти не имеет ограничений в работе.
Пациент под псевдонимом BRAVO1 перенес инсульт в возрасте 22 лет, в результате чего утратил способность говорить. Однако его когнитивные способности уцелели, и в свои 30 лет он освоил несколько технологий «разговора» при помощи указания на буквы на экране. Ученые воспользовались этим навыком и обучили его мысленно «проговаривать» слова через сочетания обозначений букв. Например, «кот» будет звучать как «Катя, Олег, Тамара».
После обучения и адаптации к пациенту BRAVO1 система научилась распознавать его речь со скоростью до 29 букв в минуту или примерно 7 слов в минуту. Погрешность не превышает 6%, в ходе последнего эксперимента BRAVO1 успешно произнес 1150 слов. Это покрывает 85 % базовых фраз в английском языке, но потенциал системы гораздо больше – словарный запас можно нарастить до 9000 слов. Большинство людей не используют столько и за целый год.
Сейчас BRAVO1 активно общается с учеными, детально описывая условия своей жизни, рассказывая о преимуществах и недостатках технологий для частично парализованных людей — например, ему не по вкусу назначенная врачами диета.
Источник — Nature Communications
Источник