资讯1 分钟阅读·
Pangram自测误报达4%和7%,官网仅展示0.01%量级
Pangram 4自测中AI辅助文本误报率最高达7%,官网此前只展示0.01%量级结果,措辞在质询后改变。
重要性局部证据E2 未复现写法快讯
Pangram 4的自测中,AI辅助文本被误判为AI生成的比例达4%和7%,而官网此前只展示最优的0.01%量级结果——LessWrong作者Sonia Albrecht 9月23日发文点名这一落差。
她称9月17日联系公司前,官网在“检测AI辅助”旁标注“99.9%+准确率”,此后措辞有变,但她不确定是否因她而起。她自测约5000词,约30%段落被标为AI生成。
以上均为批评者转述与个人自测,4%和7%未经独立复核;Pangram论文摘要自称整体误报率0.0041%。短文本误报更高,用AI润色的作者值得留意。