AI 检测器
AI 检测器是用于判断文本、图像、音频或视频是否由 AI 生成的工具。文本检测器通过分析写作中的统计特征,给出概率或评分。其结果只是估计而非证据,独立研究已记录到漏检和误判的情况。
文本检测器通常是用人类写作和 AI 写作样本训练出来的分类器,或者通过衡量文本对语言模型而言有多“可预测”来判断,因为生成的文本往往更可预测。部分图像和音频检测工具则会寻找生成痕迹,或识别生成方嵌入的水印和来源元数据。
为什么重要:学校、出版机构和雇主会用检测器检查提交的内容,因此准确性会带来实际后果。研究发现,改写措辞即可规避检测(Sadasivan 等人,2023 年),而且检测器更容易把非英语母语者的写作误判为 AI 生成(Liang 等人,2023 年)。选择检测器时,应关注公开、独立的准确率数据、明确的误报率,以及“不应把评分作为唯一证据”的使用指引。
举例:教师用检测器检查一篇作文,结果显示 AI 生成概率很高。公平的做法是把它当作与学生沟通、查看写作草稿的起点,而不是据此认定学术不端。
局限:没有任何检测器可靠到足以单独作为决策依据;同一段文本在不同工具中的结果不同;随着 AI 模型进步以及生成文本经过人工编辑,准确率还会下降。
相关术语
循序渐进地学
来源
- Can AI-Generated Text be Reliably Detected?. Sadasivan et al., arXiv, 2023年3月
- GPT detectors are biased against non-native English writers. Liang et al., arXiv, 2023年4月
主题: 选择 AI 工具
最后更新