Bing Image Creator生成
AI Detector研究人员表示该模型在区分人类写作和ChatGPT生成的文本方面表现出99%的准确率,并且明显优于ChatGPT制造商OpenAI提供的AI检测软件GPT-2 Output Detector。
研究人员也坦言,现阶段该赛模型算法测试的样本数据并不够大,只是测试了13家化学期刊和3家媒体上文章,通过20个文本特征和XGBoost,可以有效区分人类协作,以及GPT-3.5/GPT-4生成内容。
研究人员表示,这些测试表明他们的方法简单而有效。他们强调,取决于提示和模型,该工具在识别人工智能生成的文本时表现出98%-100%的准确率。
研究人员表示OpenAI目前检测器准确率目前在10-56%之间,该工具比OpenAI的更为先进。
研究人员进一步透露,这项研究和发明背后的目标是为科学界提供一种途径,让他们能够评估“ChatGPT对化学期刊的渗透,确定其使用的后果,并在出现问题时迅速引入缓解策略”。
IT之家在此附上论文地址,感兴趣的用户可以深入阅读。
Heather Desaire,Aleesa E.Chua,Min-Gyu Kim,David Hua,Accurately detecting AI text when ChatGPT is told to write like a chemist,Cell Reports Physical Science,2023,101672,ISSN 2666-3864,https://doi.org/10.1016/j.xcrp.2023.101672.