Pangram 漏检 AI 改写摘要研究
中文摘要
研究显示Pangram的检测率取决于模型版本:它能捕捉93.5%的GPT-5改写,却漏掉79.8%的Meta Muse-Glimmer改写。
English Summary
Study shows Pangram's detection rate depends on the LLM: it captures 93.5% of GPT-5 rewrites but misses 79.8% of Meta's Muse-Glimmer content.
Original Excerpt
AI 文本检测器 Pangram 漏掉了 Meta 的 Muse-Glimmer 改写的 79.8% 科学摘要,而仅将 5,000 篇人类摘要中的 1 篇标记为 AI 生成。 在东京都立大学的一篇新论文中,研究人员发现,Pangram 漏检的 AI 改写摘要比例在很大程度上取决于 LLM 版本。 研究表明,它捕获了 93.5% 的 GPT-5 改写内容,但漏掉了另一个新模型改写的 79.8%。其漏检率主要取决于改写所用的模型。