阿里数据提出大模型评测基准健康指数
热点事件持续更新
阿里数据提出大模型评测基准健康指数
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
阿里数据研究团队提出并发布基准健康指数(BHI),对158个大语言模型评测基准的有效性进行评估,结果用于判断这些基准是否仍能区分模型能力、避免分数饱和并具有参考影响力。 BHI基于117个模型的技术报告,从能力区分度、抗饱和度和影响力三个维度计算得出。其中,能力区分度占32.63%,抗饱和度占35.74%,影响力占31.63%;前两项指标按8:2合成,以当前状态为主要权重。
AI 根据报道生成 · 1 小时前更新
最新进展10月31日 22:38
阿里数据提出 BHI 基准健康指数,为 158 个大模型评测基准评估有效性报道时间线
沿着报道,了解事件的不同侧面。
10月31日
- 知乎专栏:机器之心阿里数据提出 BHI 基准健康指数,为 158 个大模型评测基准评估有效性
阿里数据研究团队提出 Benchmark Health Index(BHI),对 158 个大模型评测基准进行系统评估,相关论文《Benchmark Health Index。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。