Декодер ИИ по фМРТ восстанавливает смысл речи и фильмов
Краткое изложение авторской публикации врача в сообществе «Врачи РФ» от .
Автор материала объясняет, как семантический декодер на основе искусственного интеллекта превращает данные фМРТ в текстовое описание услышанного или увиденного. Система не передаёт мысли дословно: она восстанавливает общий смысл, иногда включая точные слова и фразы. В эксперименте Техасского университета участвовали три человека; каждого сканировали по 16 часов во время прослушивания четырёх подкастов. После обучения декодер передавал содержание историй и немых фильмов, а при одновременном воспроизведении нескольких сюжетов выделял тот, на котором участник сосредоточился.
Автор отмечает, что технология пока зависит от дорогостоящей фМРТ, чувствительна к движениям и отвлечению, а модель, обученная на одном человеке, плохо анализирует мозговую активность другого. Возможное применение с портативной fNIRS рассматривается как перспектива. Среди потенциальных пользователей автор называет людей, лишённых речи из-за заболеваний или травм.
Главное
- Нейробиологи Техасского университета проверили декодер на данных фМРТ трёх участников.
- Каждый участник провёл в сканере 16 часов, прослушивая четыре подкаста.
- Декодер создавал пересказ историй и немых фильмов, а не дословную расшифровку мыслей.
- Система пока работает только с фМРТ; её возможное применение с fNIRS описано как перспектива.
Подготовлено автоматически с помощью ИИ, возможны неточности. Полный просмотр материала доступен только для медицинских специалистов с высшим медицинским образованием.
Войти Регистрация