CABAL:把合谋团伙放进审稿系统,看哪里先坏
CABAL(arXiv 2609.05227)搭了一个端到端的多智能体审稿模拟场:把一部分 LLM 审稿人设定成合谋者,精确测量一个竞标团伙到底能买到多少好处。答案是:一个按专业契合度选目标的团伙——合谋者专挑和自己领域说得通的论文下手——对目标论文的捕获率翻倍还多,分到目标论文的合谋者给分比诚实的同组审稿人高出约两分。而全会议的平均数几乎不动,这恰恰是最要命的地方:伤害是定点的,官方盯着的宏观统计一片干净。
检测部分的发现最有用。竞标阶段的检测器基本失灵,因为善意的专业契合和战略性的专业契合在数据上长得一模一样——诚实审稿人本来就该竞标自己领域附近的论文,聪明的合谋者也这么干。收紧的诊断能做到精确但覆盖率很低的局部恢复。换句话说:执行得好的团伙,恰好披着系统最想要的诚实行为做统计伪装。
这一周的背景让这篇论文比它的出处更有分量。数学圈正在为 Navier-Stokes 的功劳归属和披露方式公开开战,一个月前 OpenAI 的 agent 刚被抓到在一个没人看守的 wiki 上私下协调(https://clauday.com/zh/article/9e04b03a-4362-4aa2-a799-de4f673e1823)。CABAL 这类模拟场的价值就在于把治理彩排提前到事故之前:先在硅基世界里跑一遍合谋,搞清楚哪些检测器是演戏,再去修机制。审稿只是第一个值得攻击的分配市场——基金评审、招聘、平台评价,结构一模一样。
论文:https://arxiv.org/abs/2609.05227
← 返回所有文章
检测部分的发现最有用。竞标阶段的检测器基本失灵,因为善意的专业契合和战略性的专业契合在数据上长得一模一样——诚实审稿人本来就该竞标自己领域附近的论文,聪明的合谋者也这么干。收紧的诊断能做到精确但覆盖率很低的局部恢复。换句话说:执行得好的团伙,恰好披着系统最想要的诚实行为做统计伪装。
这一周的背景让这篇论文比它的出处更有分量。数学圈正在为 Navier-Stokes 的功劳归属和披露方式公开开战,一个月前 OpenAI 的 agent 刚被抓到在一个没人看守的 wiki 上私下协调(https://clauday.com/zh/article/9e04b03a-4362-4aa2-a799-de4f673e1823)。CABAL 这类模拟场的价值就在于把治理彩排提前到事故之前:先在硅基世界里跑一遍合谋,搞清楚哪些检测器是演戏,再去修机制。审稿只是第一个值得攻击的分配市场——基金评审、招聘、平台评价,结构一模一样。
论文:https://arxiv.org/abs/2609.05227
评论