跳到正文
arXiv · Machine Learning· Yifan Lan, Yuanpu Cao, Hanyu Wang, Lu Lin, Jinghui Chen·· 9 小时前AI 评分48

推理的幻象:通过 Zero-CoT 截断揭示 LLM 中的规避式数据污染

The Illusion of Reasoning: Exposing Evasive Data Contamination in LLMs via Zero-CoT Truncation

AI 导读

研究者提出 Zero-CoT Probe(ZCP),通过截断模型完整思维链(CoT)检测 LLM 中的直接及规避式数据污染。ZCP 对比模型在原始基准与同构扰动参考数据集上的 zero-CoT 表现,并以 Contamination Confidence 衡量污染可能性和严重程度;实验显示该方法能稳健检测两类污染。

来源:arXiv · Machine Learning · arxiv.org