arXiv · Machine Learning· Arjun Ashok, Mihir Parmar, Palash Goyal, Bhavana Dalvi Mishra, Chun-Liang Li, Irina Rish, Alexandre Drouin, Jinsung Yoon, Tomas Pfister·· 10 小时前AI 评分45
WhatIf-Bench：干预感知时间序列预测基准测试
WhatIf-Bench: Benchmarking Intervention-Aware Time Series Forecasting
AI 导读
WhatIf-Bench 面向时间序列基础模型（TSFMs）评估其利用协变量预测目标对未来事件响应的能力，覆盖数据中心、电网、道路交通和水网络等场景，共含 37,665 个任务。评测显示，LLM 的 skill 高于最佳 TSFM；模型在 Replay 未来上的 skill 为 48% 至 85%，但在 Novel 未来上降至 -7% 至 50%，且同时干预更多协变量时表现进一步下降。
来源：arXiv · Machine Learning · arxiv.org