В эксперименте люди искали разницу между стихами ChatGPT и Шекспира

Люди не смогли различить стихи, созданные искусственным интеллектом и написанные человеком, при этом чаще отдавая предпочтения стихам ИИ. Это показало исследование, опубликованное в Scientific Reports. 

Брайан Портер и Эдуард Машери из Питтсбургского университета провели 2 эксперимента с 1634 участниками. В первой группе участникам дали прочесть десять стихотворений: пять от известных поэтов (Шекспир, Байрон, Эмили Дикинсон и др.) и пять, созданных ChatGPT 3.5 в их стиле. Испытуемые часто считали, что стихи ИИ написаны человеком, тогда как настоящие стихи поэтов принимались за работы ИИ.

Исследователи связывают эту ошибку с тем, что читатели могут воспринимать сложность стихов настоящих поэтов как бессвязность, абстрактность, свойственную ИИ, и недооценивать искусственный интеллект с его возможностями подражания людям.

Во втором эксперименте 696 участников оценивали стихи по 14 характеристикам, включая качество, эмоции и оригинальность. Людей случайным образом делили на группы: одним говорили, что стихи созданы человеком, другим — ИИ, а третьим не сообщали авторства. Те, кто думал, что стихи написаны ИИ, давали более низкие оценки, независимо от реального авторства. Напротив, когда участники не знали, кто автор, они оценивали стихи ИИ выше по качеству, чем человеческие.

Этот результат авторы исследования объясняют тем, что участники предпочитали стихи ИИ из-за их большей простоты и доступности.