arXiv · Machine Learning· Xi Chen, Chongjian Ge, Yiran Xu, Yiqun Mei, Henrik I. Christensen, Hao Tan, Ziwen Chen, Hanwen Jiang·· 10 小时前AI 评分52
Auto-Research Arena：评测并推进语言模型自动研究的基准
Auto-Research Arena: Benchmarking and Advancing Auto-Research in Language Modeling
AI 导读
Auto-Research Arena 是用于评估自主研究系统并发现语言建模新思路的多目标基准，论文将其应用于语言模型预训练的九个目标，并评测了七种研究 harness 和两个基础模型。
来源：arXiv · Machine Learning · arxiv.org