Стихи, написанные нейросетью, люди приняли за творчество классиков
Американские исследователи из Питтсбургского университета провели эксперимент, результаты которого можно назвать весьма неутешительными: испытуемые не смогли отличить стихи английских и американских поэтов от сочинений искусственного интеллекта и даже поставили нейросети более высокие оценки.
Ученые предлагали людям определить, какие из стихов написаны реальными поэтами, классиками английской и американской литературы, а какие сочинил искусственный интеллект.
В ходе эксперимента было проведено две серии тестов. В первом случае количество испытуемых составило 1634 человека, каждый из которых получил по 10 стихотворений, распределенных между ними рандомным образом. Пять стихотворений были написаны выдающимися английскими и американскими поэтами, в числе которых такие классики, как Джеффри Чосер, Уильям Шекспир, Сэмюэл Батлер, Джордж Гордон Байрон, Уолт Уитмен, Эмили Дикинсон, Томас Стернз Элиот, Аллен Гинзберг, Сильвия Плат и Доротея Ласки. Автором второй пятерки стихотворений, которые предлагались участникам эксперимента, стала модель искусственного интеллекта, получившая задание сымитировать стиль каждого из вышеперечисленных поэтов. Люди отвечали на вопрос, человек ли написал предложенные им произведения, а также сообщали, являются ли они любителями поэзии.
Для участия во второй серии были приглашены 696 человек, которых поделили на три группы. Всем респондентам показывали один и тот же набор из пяти стихотворений, написанных искусственным интеллектом, и такого же количества стихов реально существовавших поэтов. При этом первой группе испытуемых сказали, что все тексты созданы человеком, вторая группа полагала, что оценивает творчество чат-бота, а третья группа пребывала в неведении относительно авторства предложенных ей стихов.
Участников попросили оценить каждое произведение по семибалльной шкале по стандартному набору критериев: формальные качества (ритм, рифма), эмоциональность, оригинальность, эстетические особенности (лиризм), глубина раскрытия темы.
Результаты показали, что в большинстве случаев люди приписывали авторство стихов, написанных машиной, человеку, и наоборот: сочинения классиков считали не более чем творчеством искусственного интеллекта. Статья об исследовании опубликована в журнале Scientific Reports.
Ученые предположили, что люди просто не ожидали, что искусственный интеллект обладает настолько высокими способностями в отношении поэзии. Стихи, написанные настоящими поэтами, казались испытуемым чересчур сложными, а относительно простой и понятный текст, созданный искусственным интеллектом, воспринимался именно как произведение живого человека, а не бездушной машины.