AI Detector科研团队研发出高效识别ChatGPT生成文本的算法
11月8日消息,科学家最近取得了一项重大突破,借助20个特征和机器学习算法,能够高达99%的准确率来区分人类作者与ChatGPT生成的文本。
AI Detector的研究人员表示,他们的模型在识别人类写作与ChatGPT生成的文本上表现出99%的准确率,这一成就明显超越了ChatGPT制造商OpenAI提供的AI检测软件GPT-2 Output Detector。
尽管研究人员承认他们的算法测试样本数据目前还不够大,仅涵盖了13家化学期刊和3家媒体上的文章,但通过20个文本特征和XGBoost算法,他们已能够有效区分人类合作创作与GPT-3.5/GPT-4生成的内容。
研究人员表示,这些测试结果显示了他们的方法简单而有效,而且工具的准确率在识别人工智能生成的文本时可达98%-100%,这将在未来成为科学界的有力工具。
此外,研究人员披露OpenAI目前的检测器准确率介于10%到56%之间,相比之下,他们的工具更加先进。
研究人员还进一步透露,这项研究和技术的背后目标是为科学界提供一种途径,以评估ChatGPT对化学期刊的渗透情况,确定其使用的后果,并在出现问题时快速引入缓解策略。这一成就将对科学研究领域的透明性和可信度产生深远影响。