跳到正文
热点事件持续更新

RAG投毒防御评测揭示基准线索风险

1 篇报道1 个报道来源9 小时前更新

先了解这件事

AI 综述

Pushkal Kumar 和 Arvin Sahaym 指出,RAG 投毒防御基准中的构造线索会使高检测排名在部署决策中失效:删除 PoisonedRAG 插入段落里的目标问题前缀后,RAGuard 的 AUROC 从 0.953 降至 0.758,漏检率从 0.191 升至 0.763。 两人称,评估检测结果应同时报告投毒集的构造特征,以及实际部署阈值下的误报率;他们发布了用于计算构造特征的脚本。研究在四个语料库、四类攻击和十种逐文档防御的共享候选集上进行,并指出能针对防御调整策略的攻击者可以击败他们自己的评分器,因此不声称存在通用防御。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv · Machine Learning
    论文指出 RAG 投毒防御中排序不等于决策,基准捷径导致操作点崩塌

    Pushkal Kumar 和 Arvin Sahaym 研究了查询时 RAG 投毒防御,指出基准构造线索可让高检测排名在实际部署决策中失效。删除 PoisonedRAG 插入段落中的目标问题前缀后,RAGuard 的 AUROC 从 0.953 降至 0.758,miss rate 从 0.191 升至 0.763。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。