arXiv · Machine Learning· Yifan Lan, Yuanpu Cao, Hanyu Wang, Lu Lin, Jinghui Chen·· 9 小时前AI 评分48
推理的幻象:通过 Zero-CoT 截断揭示 LLM 中的规避式数据污染
The Illusion of Reasoning: Exposing Evasive Data Contamination in LLMs via Zero-CoT Truncation
AI 导读
研究者提出 Zero-CoT Probe(ZCP),通过截断模型完整思维链(CoT)检测 LLM 中的直接及规避式数据污染。ZCP 对比模型在原始基准与同构扰动参考数据集上的 zero-CoT 表现,并以 Contamination Confidence 衡量污染可能性和严重程度;实验显示该方法能稳健检测两类污染。
来源:arXiv · Machine Learning · arxiv.org