rohanpaul_ai· @rohanpaul_ai · X·· 1 天前AI 评分
Pangram 漏检 79.8% 由 Meta Muse-Glimmer 改写的学术摘要
东京 Metropolitan University 的一篇新论文发现,AI 文本检测器 Pangram 漏检了 79.8% 由 Meta 的 Muse-Glimmer 改写的科学摘要,同时在 5,000 篇人类摘要中仅误报 1 篇。论文指出,Pangram 对 GPT-5 改写文本的检出率为 93.5%,漏检率主要取决于改写所用的模型版本。
AI 文本检测工具 Pangram 漏检了 Meta 的 Muse-Glimmer 重写的 79.8% 的科学摘要,而在 5,000 篇人类撰写的摘要中仅误报了 1 篇。
东京都立大学的一篇新论文中,研究人员发现 Pangram 漏检的 AI 重写摘要比例在很大程度上取决于所用大语言模型的版本。
研究表明,它能识别出 93.5% 的 GPT-5 重写内容,却漏掉了另一个新模型的 79.8%。其漏检率主要取决于由哪个模型进行重写。
来源:rohanpaul_ai · x.com