Нейросеть Киотского университета реконструирует изображения по данным фМРТ

Краткое изложение публикации в сообществе «Врачи РФ» от .

Исследователи Киотского университета разработали нейросеть, которая восстанавливает изображения по данным фМРТ людей, рассматривавших эти изображения. Алгоритм на основе глубокого обучения создаёт изображения букв, геометрических фигур, животных и предметов; исследованием руководил Юкиасу Камитани.

Для обучения использовали данные о мозговой активности при просмотре 1200 изображений: каждый из трёх участников видел каждое изображение по пять раз. По показателю попиксельной корреляции результат составил 79,7 процента без дополнительной глубокой генеративной нейросети DGN и 76,1 процента с ней. Люди правильно сопоставляли исходные и восстановленные изображения в 96,5 процента случаев без DGN и в 99,1 процента с DGN. Визуально алгоритм лучше справлялся с простыми формами и цифрами, чем с реальными объектами.

Главное

  • Нейросеть Киотского университета реконструирует изображения по данным фМРТ людей, которые их рассматривали.
  • Для обучения использовали 1200 изображений, каждое из которых три участника просматривали по пять раз.
  • Попиксельная корреляция составила 79,7 процента без DGN и 76,1 процента с DGN.
  • Люди верно сопоставляли исходные и восстановленные изображения в 96,5 процента случаев без DGN и в 99,1 процента с DGN.

Подготовлено автоматически с помощью ИИ, возможны неточности. Полный просмотр материала доступен только для медицинских специалистов с высшим медицинским образованием.

Войти Регистрация