可复现评估:生产级 Agent 安全 Prompt 压缩的基础
英文标题:Reproducible Evaluation as the Substrate for Safe Prompt Compression in Production Agents
在企业真实且动态变化的数据环境中,评估对话式 Agent 面临严峻挑战。随着后端状态发生改变,历史会话重放极易出现状态漂移,而当前构建的基准测试也会随着底层数据的演进而静默失效。为此,研究团队提出了一种离线评估框架,为生产级 Agent 的提示词压缩构建了可复现的验证基底。该方案对行业开发者在保证系统稳定性与安全性的前提下大幅压缩 Prompt 规模具有重要参考价值。
打开原文相关 4 · 机会 2
640 B
612 B
380 B
24.2 KB
34.7 KB
中文
论文信息
- arXiv 编号:
arXiv:2610.31972v1 - 公告类型:new
摘要
在面向企业实时且可变数据运行的对话式 Agent 评估极具挑战:随着后端状态的变更,重放会话会产生漂移;今天构建的基准测试,也会随着所依赖数据的更新而在不知不觉中失效。为此,我们提出了一种离线评估方案……
BibTeX 格式引用
×
English / 原文
BibTeX formatted citation
×