
Там может стать новой надеждой для жертв инсульта и других «запертых» людей, которые не могут общаться обычными средствами. Он представляет собой новую экспериментальную систему BrainGPT, которая способна читать мысли пользователей и преобразовывать их в читаемый текст.
Парализованные люди, страдающие от состояния блокировки, не только неспособны говорить, но и также не может использовать жесты рук или головы для общения. Некоторые из них способны двигать глазами, поэтому могут использовать системы связи с отслеживанием движений глаз, но у других нет даже этой способности.
В последние годы мы видели альтернативные установки, преобразующие мозговые волны в текст. Однако эти системы обычно либо требуют хирургической имплантации электродов в мозг пользователя, либо они способны только к базовой коммуникации типа «да/нет».
Именно здесь однажды может появиться BrainGPT.
В настоящее время его разрабатывает группа ученых из Сиднейского технологического университета. Он просто требует от пользователей носить капу ЭЭГ (электроэнцефалограммы), подключенную к компьютеру. Никаких камер слежения за взглядом или другого дополнительного оборудования не требуется.
Специальное программное обеспечение DeWave, используемое BrainGPT, было обучено путем записи и анализа электрических сигналов, вырабатываемых мозгом 29 добровольцев, когда они молча читали отрывки из текста. текст.
Проще говоря, алгоритмы DeWave на основе искусственного интеллекта определили, какие конкретные сигналы ЭЭГ соответствуют каким написанным словам и фразам. Когда впоследствии он обнаружил эти сигналы, когда пользователь не читал текст, он знал, что человек думаетсоответствующее слово или фраза… или, по крайней мере, так было часто.
В настоящее время оценка перевода системы составляет около 40 % по шкале BLEU (BiLingual Evaluation Understudy), которая мера точности машинного перевода текста. Тем не менее, команда надеется увеличить это число примерно до 90% после дальнейшего развития технологии.
«Это исследование представляет собой новаторскую попытку перевода необработанных волн ЭЭГ непосредственно на язык, что знаменует собой значительный прорыв в области», — сказал ведущий ученый, профессор К.Т. Лин. «Он первый, кто внедрил методы дискретного кодирования в процесс перевода мозга в текст, представляя инновационный подход к нейронному декодированию».
BrainGPT демонстрируется в следующем видео.
Исследование UTS HAI — BrainGPT




