chatgpt论文检测 离谱!61%中国人写的英语论文会被ChatGPT检测器判为AI生成的

默认分类1年前 (2023)发布 admin
2,540 0
ChatGPT国内版

,很火!/生成语言模型为数字通信带来了实质性的进步,同时也引起了人们对人工智能生成内容可能被滥用的担忧。因此,人类开发出许多AI/GPT检测器来区分人工智能和人类生成的内容,但这些检测器的性能未得到充分探索。

近期有研究表明:常用的AI/GPT检测器对非英语母语作者表现出偏见!

a: 纵坐标:7款AI检测器;横坐标是AI的误判率

chatgpt论文检测 离谱!61%中国人写的英语论文会被ChatGPT检测器判为AI生成的

样本是: 91 human- TOEFL (非母语作者,来自中国)和88 US 8-th grade (母语作者,美国八年级学生写的)

结果显示:

7个检测器中,母语作者的作文被误判的概率最高才12%,还有两个0误判的GPT。但是,非母语作者的论文误判率基本全部过半,平均值为61.22%,最高误判概率可达76%。

b: 一致被错误分类为人工智能生成的论文比其他论文的复杂度低,这表明GPT检测器可能会惩罚语言表达有限的作者

chatgpt论文检测 离谱!61%中国人写的英语论文会被ChatGPT检测器判为AI生成的

c: 使用 s (: “ the word to sound more like that of a .”)改进托福作文后,发现误判率降低。相反,应用来简化美国八年级作文中的单词选择(: “ word as of by a non- .”),发现会显著增加人工智能生成文本的错误分类。

d:简化后,文本复杂度降低。

……其他数据也间接证实:

非母语者写的东西不地道,复杂度低,容易被错判。这也在提示学术科研界 OR 学术期刊出版商,应谨慎对待非母语作者的学术论文,需考核内容检测器的性能。

改写自:新智元和文章本身

© 版权声明
广告也精彩

相关文章

暂无评论

暂无评论...