Эксперимент с 1682 участниками продемонстрировал: тексты, созданные ИИ, оценивались как более качественные и интересные, особенно когда их авторство ошибочно приписывали человеку
Искусственный интеллект123 минуты назад
Исследование, проведенное учеными Университета Виллановы (Villanova University), показало, что участники эксперимента ставили более высокие оценки коротким рассказам, написанным ChatGPT, по сравнению с текстами авторов-людей, как по качеству, так и по способности удерживать внимание читателя.
В первом эксперименте участвовали 1682 человека в возрасте от 18 до 81 года. Участникам показывали короткий рассказ и сообщали, кто его написал — человек или искусственный интеллект, причем информация могла быть как правильной, так и ложной. Затем проводилась оценка качества текста и уровня вовлеченности при чтении. Исследователи использовали 3 рассказа от людей из литературных журналов и сборников и 3 аналогичных текста, созданных ChatGPT.
В среднем рассказы, созданные ИИ, получили более высокие оценки по обоим параметрам. При этом на восприятие значительное влияние оказывало предполагаемое авторство: тексты, которые участники считали написанными людьми, оценивались выше независимо от их настоящего происхождения. В результате наивысшие баллы получили именно рассказы ChatGPT, которым ошибочно приписали человеческое авторство.
В двух следующих экспериментах исследователи проверили, способны ли читатели самостоятельно определить происхождение текста без подсказки об авторе. В одном из исследований с участием 424 человек точность определения составила 39,93%, что оказалось ниже уровня случайного угадывания. В другом эксперименте с 481 участником результат составил 51,97% — статистически не отличаясь от случайного выбора.
Авторы исследования подчеркивают, что работа не сравнивает литературные навыки, оригинальность или способности создания больших произведений. Она демонстрирует два конкретных эффекта: оценку читателей качества текста и сложность определения его происхождения. Результаты свидетельствуют о том, что без специальных методов проверки люди плохо распознают тексты, созданные генеративным ИИ.
Darth SaharaИсточники:letsdatascienceИскусственный интеллект1ChatGPTИскусственный интеллектЦифровые технологии23 минуты назад
Источник