跳到正文
arXiv · Machine Learning· Kazuki Nakayashiki·· 13 小时前AI 评分58

从运气中吸取教训:大语言模型撰写的经验会把偶然性带入智能体的下一次决策吗?

Lessons from Luck: Do LLM-Written Lessons Carry Chance into an Agent's Next Decision?

AI 导读

研究者开展预注册研究,检验大语言模型根据运行结果撰写的经验是否会影响智能体后续工具选择。研究覆盖 256 个合成世界、11 个 LLM 端点,共记录 90,084 个回答;较可靠工具偶然失败后,下一轮选择较差工具的比例为 11.6%,而成功经验和无关记忆条件均为 0.4%。较差工具偶然成功后的交互效应为 +0.002,低于 0.10 的界限;作者指出,这一界限不代表没有伤害。

来源:arXiv · Machine Learning · arxiv.org