$\tau$-Elicitation:语音 Agent 多轮实体抽取评测基准
英文标题:$\tau$-Elicitation: Benchmarking multi-turn entity extraction in voice agents
针对语音 Agent 在采集姓名、地址、标识符、日期与时间等实体时面临的精准度挑战,研究人员提出了全新评测基准 $\tau$-Elicitation。现有的端到端基准往往难以明确诊断出信息采集失败的具体环节,而 $\tau$-Elicitation 提供了涵盖 10 种实体类型、共 200 个任务的受控难度评测集。该工作为开发者深入评估与优化语音 Agent 在多轮对话中的实体抽取能力提供了关键评测工具与数据支持。
打开原文相关 4 · 机会 2
640 B
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
arXiv 编号:arXiv:2609.13602v1 公告类型:new
摘要
语音 Agent(Voice agents)通常需要精确采集姓名、地址、标识符、日期和时间等信息,但现有的端到端基准往往难以明确信息捕获具体在哪个环节失效。为此,我们推出了 $\tau$-Elicitation,这是一个包含 200 个任务的语音评测基准,涵盖 10 种实体类型,并设置了受控的难度分级。
BibTeX formatted citation
×
English / 原文
BibTeX formatted citation
×