Дипфейки на фото: алгоритм ищет подделку по отражениям в глазах

Краткое изложение публикации в сообществе «Врачи РФ» от .

Исследователи Университета Баффало предложили выявлять дипфейки на фотографиях по различиям отражений в глазах. На реальных снимках отражения обычно почти одинаковы, а на изображениях, созданных нейросетью, они могут заметно расходиться.

Алгоритм выделяет отражения в радужках и сравнивает их сходство с помощью коэффициента Жаккара. При проверке на фотографиях из набора Flickr-Faces-HQ и изображениях, созданных StyleGAN2 для сайта This Person Does Not Exist, точность классификации составила 94 процента. Авторы отмечают, что результат получен на портретах при ярком освещении; при отсутствии явных отражений эффективность метода будет ниже. Статья опубликована на arXiv.org.

Главное

  • Алгоритм выявляет дипфейки, сравнивая отражения в глазах на фотографии.
  • Точность классификации на изображениях из двух выборок составила 94 процента.
  • Метод проверяли на реальных фотографиях Flickr-Faces-HQ и изображениях StyleGAN2 с сайта This Person Does Not Exist.
  • Эффективность метода снижается на снимках без явных отражений и при условиях, отличных от яркого освещения.

Подготовлено автоматически с помощью ИИ, возможны неточности. Полный просмотр материала доступен только для медицинских специалистов с высшим медицинским образованием.

Войти Регистрация