跳到正文
RadarAI· X:Rohan Paul (@rohanpaul_ai)·· 8 天前AI 评分48

Pangram 漏检 AI 改写摘要研究:漏掉 Muse-Glimmer 改写的 79.8%

Pangram 漏检 AI 改写摘要研究

AI 导读

东京都立大学新论文发现,AI 文本检测器 Pangram 漏掉了 Meta 的 Muse-Glimmer 改写的 79.8% 科学摘要,而 5,000 篇人类摘要中仅 1 篇被误标为 AI 生成。其漏检率主要取决于改写所用的 LLM 版本:Pangram 捕获了 93.5% 的 GPT-5 改写内容,却漏掉了另一个新模型改写的 79.8%。

正文 · 原文

Rohan Paul· @rohanpaul_ai · X·2026-10-10 13:45· 33 分钟前AI 评分50

AI 导读

AI 文本检测器 Pangram 漏掉了 Meta 的 Muse-Glimmer 改写的 79.8% 科学摘要,而仅将 5,000 篇人类摘要中的 1 篇标记为 AI 生成。 在东京都立大学的一篇新论文中,研究人员发现,Pangram 漏检的 AI 改写摘要比例在很大程度上取决于 LLM 版本。 研究表明,它捕获了 93.5% 的 GPT-5 改写内容,但漏掉了另一个新模型改写的 79.8%。其漏检率主要取决于改写所用的模型。

正文

Pangram, the AI-text detector, missed 79.8% of scientific abstracts rewritten by Meta's Muse-Glimmer, while flagging just 1 of 5,000 human abstracts.

In a new paper from Tokyo Metropolitan University, reseaerchers find the share of AI-rewritten abstracts that Pangram misses depends strongly on the LLM version

Shows that it caught 93.5% of GPT-5 rewrites but missed 79.8% from another new model. Its miss rate depended mostly on which model did the rewriting.

来源:Rohan Paul · x.com

来源:RadarAI · aihot.news