最近随着ChatGPT火爆,各种大型语言模型都开始飞速发展,并被运用到了各行各业。带来生产力飞速提升的同时,也带来了一些问题。比如一名老师,该如何判断学生提交的作业是否是使用ChatGPT来写的呢?
首先我上篇文章已经介绍了OpenAI自己的方案:北方的郎:AI内容检测工具之OpenAI自己的AI classifier
现在看看其他人的方案,GPTZero,网址:https://gptzero.me/
它自称是最好的检测工具:
初步用了一下,感觉GPTZero有两点比较好:首先是相比于AI Classifier的1000字的限制,它只需要250个,其次是会把它认为是AI生成的内容标黄展示。
那就让我们来详细实验一下吧。
1,科技论文
1.1 ChatGPT:
虽然是部分成功,不过效果还是不错。
1.2 Claude
这次识别是完全正确
1.3 文心一言
哈哈,感觉它对文心一言还是不太熟悉。不过他还是标出了大量的疑似用AI写的内容
2,记叙文
再分别用ChatGPT,Claude,文心一言写记叙文。
2.1 ChatGPT
完全成功。
2.2 Claude:
这个是完全没有识别出来。
2.3 文心一言的:
这个也成功了。
结论
整体感觉效果还可以,对于科技论文识别的比较准确,记叙文等效果差一点。不同模型来说感觉对于ChatGPT识别最好,其他模型稍差。