Нейросеть описывает патологии на рентгеновских снимках легких
Краткое изложение публикации в сообществе «Врачи РФ» от .
Исследователи Сколтеха обучили нейросеть выявлять патологии на рентгеновских снимках легких и составлять их текстовое описание для врача. По словам создателей, обработка одного снимка занимает около 30 секунд, если не требуется значительная правка текста. Обычно специалисту остается подтвердить предложенный диагноз или заключение об отсутствии признаков патологии.
Модель обучали на парах «изображение — текст» с использованием сводной базы рентгеновских снимков, сбалансированной по разным болезням, и специально составленного радиологического словаря. Решение объединяет модели компьютерного зрения и компьютерной лингвистики, в том числе GPT-3 small. Результаты исследования опубликованы в Nature Scientific Reports. Среди возможных направлений развития — применение системы к МРТ- и КТ-снимкам, обучение с учетом правок врача и подсветка подозрительных областей на рентгенограмме.
Главное
- Нейросеть Сколтеха обнаруживает патологии на рентгеновских снимках легких и формирует текстовое описание.
- По словам создателей, обработка снимка занимает около 30 секунд, если не нужна значительная правка текста.
- Модель обучали на парах «изображение — текст» и сбалансированной по болезням базе рентгеновских снимков.
- В решении используются модели компьютерного зрения и компьютерной лингвистики, включая GPT-3 small.
- Исследование опубликовано в журнале Nature Scientific Reports.
Подготовлено автоматически с помощью ИИ, возможны неточности. Полный просмотр материала доступен только для медицинских специалистов с высшим медицинским образованием.
Войти Регистрация