Forecast-Dojo:用于评测和训练 LLM 预测 Agent 的可重放环境
英文标题:Forecast-Dojo: Replayable Environments for Benchmarking and Training LLM Forecasting Agents
论文介绍了 Forecast-Dojo,这是一个用于评测和训练 LLM 预测 Agent 的可重放环境。该环境将已结算的预测市场问题与带日期的新闻资料结合,使 Agent 能够围绕事件开展研究,并在后续阶段重新审视此前的预测。该方法旨在为预测能力的基准测试和训练提供更接近真实信息演进过程的实验环境。对开发者而言,Forecast-Dojo 有助于评估 Agent 在动态信息条件下进行研究、判断与更新预测的能力。
打开原文相关 3.2 · 机会 2
640 B
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
BibTeX 格式引文
English / 原文
BibTeX formatted citation
×