编辑:拉燕
【新智元导读】非母语者写的文章=AI生成?气抖冷。ChatGPT火了以后,用法是真多。
有人拿来寻求人生建议,有人干脆当搜索引擎用,还有人拿来写论文。
论文...可不兴写啊。
美国部分大学已经明令禁止学生使用ChatGPT写作业,还开发了一堆软件来鉴别,判断学生上交的论文是不是GPT生成的。
这里就出了个问题。
有人论文本来就写的烂,判断文本的AI以为是同行写的。
更搞的是,中国人写的英文论文被AI判断为AI生成的概率高达61%。
图表中的百分比表示「误判」的比例。即,是由人写的,但检测软件认为是AI生成的。
可以看到数据非常悬殊。
七个检测器中,美国八年级学生写的作文被误判的概率最高才12%,还有两个零误判的GPT。
中国论坛上的托福作文被误判的概率基本全部过半,最高误判概率可达76%。
91篇托福作文中的18篇被所有7个GPT检测器一致认为是AI生成的,而91篇中有89篇,都至少被一个GPT检测器误判。
言而总之,总而言之,各种GPT检测器好像还是没能抓住AI生成和人类写作之间最本质的区别。
人的写作也分三六九等,仅靠复杂度判断,不甚合理。
抛开偏见因素不谈,技术本身也亟待改进。
参考资料:
https://arxiv.org/pdf/2304.02819.pdf
花粉社群VIP加油站
猜你喜欢