TauIndianBankBench:面向工具调用型对话 Agent 的流程感知与行动导向评估基准
英文标题:TauIndianBankBench: Procedure-Aware, Action-Oriented Evaluation of Tool-Using Conversational Agents
本文提出了针对金融银行业务场景的评估基准 TauIndianBankBench。目前许多印度银行主要通过常见问题(FAQ)页面和基于脚本的聊天机器人为客户提供服务。基于大语言模型(LLM)的智能助手不仅能够提供更快的响应,还可以直接执行如银行卡挂失等具体业务操作,但这要求 Agent 必须提供准确信息并严格遵守银行的既定业务规则。该研究为评估工具调用型 Agent 在严格合规流程下的实际行动能力提供了重要的测试标准。
打开原文相关 2.4 · 机会 2
461 B
612 B
380 B
24.2 KB
34.7 KB
中文
论文编号:arXiv:2610.30161v1
公告类型:new
摘要
许多印度银行通过常见问题解答(FAQ)页面和预设脚本的聊天机器人为客户提供服务。基于大语言模型构建的智能助手不仅能够做出更快的响应,还能代表用户执行具体请求(例如冻结/挂失银行卡),但这需要建立在它们能够提供准确信息并严格遵守银行既定规则的前提之下。
BibTeX 格式引用
×
English / 原文
BibTeX formatted citation
×