Нейросеть Киотского университета реконструирует изображения по данным фМРТ
Краткое изложение публикации в сообществе «Врачи РФ» от .
Исследователи Киотского университета разработали нейросеть, которая восстанавливает изображения по данным фМРТ людей, рассматривавших эти изображения. Алгоритм на основе глубокого обучения создаёт изображения букв, геометрических фигур, животных и предметов; исследованием руководил Юкиасу Камитани.
Для обучения использовали данные о мозговой активности при просмотре 1200 изображений: каждый из трёх участников видел каждое изображение по пять раз. По показателю попиксельной корреляции результат составил 79,7 процента без дополнительной глубокой генеративной нейросети DGN и 76,1 процента с ней. Люди правильно сопоставляли исходные и восстановленные изображения в 96,5 процента случаев без DGN и в 99,1 процента с DGN. Визуально алгоритм лучше справлялся с простыми формами и цифрами, чем с реальными объектами.
Главное
- Нейросеть Киотского университета реконструирует изображения по данным фМРТ людей, которые их рассматривали.
- Для обучения использовали 1200 изображений, каждое из которых три участника просматривали по пять раз.
- Попиксельная корреляция составила 79,7 процента без DGN и 76,1 процента с DGN.
- Люди верно сопоставляли исходные и восстановленные изображения в 96,5 процента случаев без DGN и в 99,1 процента с DGN.
Подготовлено автоматически с помощью ИИ, возможны неточности. Полный просмотр материала доступен только для медицинских специалистов с высшим медицинским образованием.
Войти Регистрация