跳到正文
热点事件持续更新

SearchHorizonBench评估AI搜索价值

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

Jingjie Ning、Xueqi Li、Yibo Kong 提出 SearchHorizonBench,用于学习和评估 AI 智能体的搜索价值;论文报告称,历史校准在 1,632 个留出问题上将 Brier 误差降低 16.2%,但历史估计器对搜索收益点估计方差的解释不足 2%。 该基准包含 3,168 个问题和 45,632 次执行。在参考 token 价格下,论文还报告称,免费选择观测相较于始终采取同一动作可带来 2.49 个百分点的效用机会,且主要由搜索收益信息驱动。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv · Machine Learning
    SearchHorizonBench:面向 AI 智能体搜索价值的基准测试

    SearchHorizonBench 提出用于学习和评估 AI 智能体搜索价值的基准,包含 3,168 个问题和 45,632 次执行。在 1,632 个留出问题上,历史校准使 Brier 误差降低 16.2%,但测试中的历史估计器对搜索收益点估计方差的解释不足 2%。在参考 token 价格下,免费选择观测相对最佳恒定动作带来 2.49 个百分点的效用机会,主要由搜索收益信息驱动。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。