Можно ли отличить дипфейк от настоящего фото: ответ ученых

Как распознавать дипфейки и почему новый метод подходит не всем: эксперт МФТИ оценил перспективы и ограничения специального обучения.
Иллюстрация: ChatGPT

Нейросети совершенствуются еженедельно. Иногда почти невозможно отличить, какой контент в интернете настоящий, а какой — создан машиной. Эксперт МФТИ оценил для Науки Mail недавнее заявление американских ученых о том, что человека можно научить распознавать дипфейки.

Как ученые предлагают распознавать дипфейки

Ученые Университета Индианы (США) предложили новый способ тренировки, который позволяет выявлять изображения, сгенерированные нейросетями.

Часто подделку удается определить по дефектам изображения. Однако модели ИИ каждый месяц улучшаются, поэтому провести грань между реальностью и генерацией иногда почти невозможно. Исследователи предложили обращать внимание не на детали, а на общее впечатление. Исследование опубликовано в журнале PNAS.

Ученые создали специальный курс, который затем прошли 45 добровольцев. После этого участники эксперимента стали почти вдвое точнее выявлять подделки, а лучшие достигали 100% правильных ответов. Повторные тесты подтвердили, что это эффект обучения, а не опыта.

Эксперт МФТИ указал на ограничения метода

Эффективность такого метода оценил доктор физико-математических наук, директор Центра агентных систем ИИ МФТИ Александр Безносиков. По его словам, двукратный рост точности — статистически значимый эффект, однако у исследования есть и заметные ограничения.

В частности, для генерации изображений в эксперименте использовалась всего одна модель — StyleGAN3, причем не самая новая. То есть участники учились распознавать артефакты конкретного генератора, а не «дипфейки вообще».

«Если завтра выйдет новая модель, то навык, скорее всего, потребуется перенастраивать. А генеративные модели сейчас обновляются постоянно», — отметил специалист.

Субъективность оценок и долгосрочный эффект

Кроме того, оценки изображений, скорее всего, будут субъективными для каждого испытуемого, тогда как отличие дипфейка от реального изображения является объективным. Результат можно считать статистически устойчивым благодаря тому, что субъективные измерения были объединены и проанализированы по многим участникам.

«Авторы не проверяли, насколько устойчив навык в долгосрочной перспективе, а это обязательный вопрос для любой системы обучения», — обратил внимание Безносиков.

Кому может пригодиться такой навык

Навык может быть полезен журналистам, фактчекерам, модераторам и другим специалистам, регулярно сталкивающимся с дипфейками. Такое знание может помочь избежать опасной самоуверенности и, как следствие, неприятных рабочих ошибок.

«Что касается практической значимости, для обывателей этот навык может быть не особенно актуален. Зачастую сегодня генерируются не просто лица, а полноценные видео с окружением, для которых не было проведено исследование, поэтому утверждение, что этот навык может пригодиться, — спорно», — заключил Александр Безносиков.

В целом к этому исследованию стоит относиться как к доказательству принципа, а не к готовому решению, подчеркнул эксперт.

Подписывайтесь и читайте «Науку» в MAX