维拉诺瓦大学的Sydney Sears与Deena Skolnick Weisberg对2587名成年人进行了三项实验,成果本月发表于剑桥大学出版社旗下期刊《Judgment and Decision Making》,出版方于8月4日公布了这项发现。参与者阅读约一千字的短篇小说,其中部分出自人类之手,部分由ChatGPT生成;关于作者身份,他们有时被告知实情,有时被告知相反的信息。结果显示,读者在质量与吸引力两个维度上,给AI作品的评分都高于人类作品;而当他们被告知某篇出自人类之手时,评分还会进一步走高。可一旦要求他们指认作者,他们便败下阵来:第二项实验的正确率为39.93%,比随机猜测还差;第三项为51.97%,与随机猜测无异。只有一项特征能预测辨识能力,而且并非人们想当然的那一项——自称与AI系统打交道更多的人表现更好,自称文学造诣更深的人却没有。Weisberg表示,AI的文字往往更清晰、更直接、更易读,而人类写的故事常常更含蓄、更复杂。