Рассказам от ChatGPT читатели поставили более высокие оценки, чем текстам людей

Искусственный интеллект уже способен создавать короткие рассказы, которые многие читатели считают более увлекательными и качественными, чем произведения, написанные людьми. К такому выводу пришли авторы исследования, опубликованного в журнале Judgment and Decision Making.

• Ученые проверили, насколько люди могут отличить тексты, созданные человеком, от рассказов, написанных нейросетью. В эксперименте приняли участие 1682 взрослых. Им предложили прочитать один из шести коротких рассказов: три произведения были написаны людьми, а три — созданы ChatGPT. При этом каждая история, сгенерированная ИИ, имела похожую тему с одним из человеческих текстов.
• Перед чтением участникам сообщали, кто якобы является автором рассказа — человек или искусственный интеллект. Однако исследователи намеренно иногда давали неверную информацию. После этого добровольцы оценивали, насколько история их заинтересовала, насколько легко ее было воспринимать и какого качества был текст.

Предпочтение ИИ, но доверие людям

Оказалось, что рассказы, созданные ChatGPT, в среднем получили более высокие оценки по увлекательности и качеству, чем произведения людей. При этом участники выше оценивали тексты, которые им представляли как написанные человеком.

• Результаты показывают: современные ИИ-системы уже способны создавать рассказы, которые воспринимаются как минимум не хуже человеческих, отметили авторы исследования. Однако это не означает исчезновения роли человека в писательстве. Произведения ИИ и книги, созданные совместно человеком и нейросетью, могут занять свое место в культуре, но человеческое творчество останется важным как способ самовыражения и осмысления собственного опыта.
• Кроме того, отношение людей к ИИ влияет на восприятие текстов. Участники, которые позитивнее относились к нейросетям, чаще высоко оценивали рассказы, представленные как созданные ChatGPT.

Люди плохо распознают тексты нейросетей

В дополнительных экспериментах ученые проверили, смогут ли участники определить настоящего автора текста. 905 людям показывали по два рассказа на одну тему — один был написан человеком, другой создан ИИ — и просили угадать происхождение каждого текста.

• В одном эксперименте правильный ответ дали около 40% участников, что оказалось даже ниже случайного результата. В другом точность составила 52%. Авторы исследования пришли к выводу, что в целом люди не способны надежно отличать рассказы ИИ от человеческих.
• При этом опыт работы с искусственным интеллектом оказался важнее литературной подготовки. Люди, которые чаще пользовались ИИ-системами, лучше распознавали особенности машинных текстов. По словам экспертов, стиль нейросетей, как и стиль отдельных писателей, можно научиться узнавать с практикой.
• Возможно, любовь людей к «человеческим» текстам связана с желанием видеть в творчестве подлинность. Однако фактически читатели могли выбирать произведения ИИ из-за их простоты и удобства восприятия, полагают специалисты.