DataPrep-Bench:面向训练数据准备的 LLM 基准测试
英文标题:DataPrep-Bench: Benchmarking LLMs as Training Data Preparators
DataPrep-Bench 旨在评估大语言模型(LLM)作为训练数据准备工具时的能力。论文指出,训练数据质量从根本上决定 LLM 的能力,但目前尚缺少能够端到端衡量 LLM、Agent 及数据中心工作流数据准备效果的统一基准。该基准有望为开发者比较数据清洗、整理与构建流程提供更一致的评估依据,并推动数据工程能力成为模型开发的重要衡量维度。原始摘要在提供内容中未完整展示,未包含具体实验数据或结果。
打开原文相关 6.4 · 机会 2
640 B
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
BibTeX 格式化引用
English / 原文
BibTeX formatted citation
×