研究显示ChatGPT可为科学假说生成虚假数据集，对学术诚信造成威胁

IT之家 11 月 24 日消息，据《自然》杂志当地时间周三报道，本月初发表在《美国医学会眼科学杂志》上的一篇论文中，作者使用了聊天机器人 GPT-4 和高级数据分析工具 ADA 创建了一个虚假的临床试验数据集，从而支持一个“未经证实”的科学主张。

图源 Pexels

IT之家注：ADA 是一种结合了 Python 的模型，可用来执行统计分析、创建可视化数据。

报道称，论文作者要求 GPT-4 和 ADA 生成一个有关角膜炎患者的数据集，并让它支持“深层前部角膜移植在视力和眼睛成像测试方面比穿透性角膜移植效果更好”的结论。

由 AI 生成的数据包括 160 名男性参与者和 140 名女性参与者的实验结果，并支持了上述结论，然而这个结果与真正临床试验显示的结果不符。

专家对该虚假数据集进行了详细检查，并发现其中存在明显捏造迹象。英国曼彻斯特大学生物统计学家杰克・威尔金森表示，“要创建至少表面上看似可信的数据集似乎很容易，在未经训练的人看来，这‘肯定是’一个真实的数据集。”

参与这份研究报告的作者承认，这一数据集在经过“仔细观察”之后就可发现其中存在的缺陷，但如果读者快速查看这些数据集的话，就“很难识别出”数据中的非人类来源。

由 AI 编造的“可信数据”增加了研究人员和期刊编辑对学术研究诚信的担忧。《EMBO Reports》杂志主编 Bernd Pulverer 表示，“现实中的同行评审往往不会对数据进行全面的重新分析，因此不太可能发现利用人工智能精心设计的完整性漏洞。”他补充说，期刊需要更新质量检查，以识别 AI 生成的合成数据。