迈向更安全的 RAG:只有具备系统 2 思维能力的 Agent 才应访问不受信任文档
英文标题:Towards Safer RAG: Only Agents Capable of System 2 Thinking may Access Untrusted Documents
这篇新发布的 arXiv 论文聚焦检索增强生成(RAG)系统的安全风险。论文指出,尽管 RAG 显著提升了大语言模型(LLM)的性能,但系统仍容易遭受知识投毒攻击,检索文档中的错误信息可能影响模型输出。论文标题提出,应仅允许具备“系统 2 思维”能力的 Agent 访问不受信任的文档,以降低此类风险。该观点对 RAG 开发者意味着,需要在检索、文档信任分级和 Agent 推理能力之间建立更严格的安全控制机制。
打开原文相关 5.6 · 机会 2
461 B
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
BibTeX 格式引用
×
English / 原文
BibTeX formatted citation
×