Результаты недавно проведённого исследования, опубликованные в авторитетном журнале Nature Communications, показывают, что большинство людей сейчас не способны отличить стихи, написанные знаменитыми поэтами, от произведений, созданных искусственным интеллектом, которого попросили подражать стилю известных писателей. Интересно, что многим пользователям и вовсе больше нравятся стихи, написанные нейросетью, чем произведения настоящих поэтов.
В результатах исследования указано, что большинство читателей воспринимают сложность стихов, созданных человеком, за «неразбериху», которая обычно характерна для искусственного интеллекта. При этом тексты от нейросетей кажутся более понятными и «очеловеченными».
В ходе проведения эксперимента аналитики использовали стихи десяти известных поэтов, чьи работы охватывают около 700 лет англоязычной литературы. Во время тестирования пользователям предложили ознакомиться с произведениями Джеффри Чосера, Уильяма Шекспира, Сэмюэла Батлера, лорда Байрона, Уолта Уитмена, Эмили Дикинсон, Томаса Элиота, Аллена Гинзберга, Сильвии Плат и единственной современной поэтессы Дороти Ласки.
У каждого поэта эксперты выбрали по пять стихотворений, после чего с использованием нейросети ChatGPT 3.5 было сгенерировано ещё пять стихотворений в стиле каждого указанного автора. Результаты созданных ИИ стихов были переданы для тестирования без каких-либо корректировок, и использовались первые пять полученных текстов.
В рамках первого эксперимента аналитики задействовали 1634 пользователя. Их случайно распределили по нескольким группам, после чего попросили ознакомиться с десятью стихотворениями, среди которых вперемешку были пять произведений реальных авторов и пять от искусственного интеллекта. Участникам эксперимента предлагалось выбрать, какие именно стихи были написаны человеком, а какие — нейросетью. Результаты показали, что чаще всего пользователи ошибались и думали, что созданные ИИ стихи были написаны человеком. При этом большинство стихов, написанных известными поэтами, они принимали за работу искусственного интеллекта.
В ходе второго эксперимента специалисты отобрали ещё 700 человек, которых попросили оценить представленные стихи по 14 критериям: качество, красота, эмоциональность, ритм и оригинальность. В этом случае участников эксперимента разделили на три отдельные группы. Первой сообщили, что все стихи написаны людьми, второй — что все стихи созданы искусственным интеллектом, а третьей группе не дали вообще никакой информации об авторе.
В итоге участники эксперимента, которые не знали, кто именно писал стихи, оценивали произведения, созданные искусственным интеллектом, немного выше, чем стихи от реальных авторов. При этом участники группы, знавшие, что стихи созданы искусственным интеллектом, оставили этим произведениям низкие оценки.
Экспериментаторы пришли к выводу, что участники тестирования применяли похожие, но ошибочные способы, чтобы различить стихи, написанные поэтами, и искусственным интеллектом. Ввиду того что нейросеть создавала более простые и логичные произведения, многие участники были уверены, что это работы реальных поэтов. При этом сложные произведения настоящих авторов казались многим пользователям «роботизированными» и «запутанными».
Ещё по теме: