Back to Home
RadarAI··Papers & Tech

东京都立大学论文:LLM 版本更迭令 AI 文本检测器大幅失效

中文摘要

东京都立大学研究:LLM版本更迭致AI文本检测器大幅失效。旧检测器对新模型文本捕获率从99%降至3.8%。建议每次模型更新后重新验证。

English Summary

Tokyo Metropolitan University research finds LLM updates cripple AI text detectors. Detection rates for new models dropped from 99% to 3.8%. Re-validate detectors with each new LLM version.

Original Excerpt

东京都立大学等机构的论文发现,基于厂商旧模型训练的 AI 文本检测器在模型代际更迭前可捕获 99% 以上的改写,更迭后仅捕获 3.8%。论文用 4,000 篇前 ChatGPT 时代摘要由 25 个 LLM 版本改写进行测试;引用案例中 Pangram 漏掉 79.8% 被 Meta Muse-Glimmer 改写的科学摘要,但对 5,000 篇人写摘要仅误报 1 篇,作者建议每次模型发布都重新验证检测器。