外观
Agent 出现幻觉,有哪些解决方案?
标准回答
处理幻觉要让答案依赖可核验的证据,并在证据不足时允许系统说不知道。
- 提供相关、可信且有版本的来源,减少上下文噪声。
- 要求答案关联证据,信息不足时澄清或说明不能确定。
- 对数字、引用、工具结果和业务条件做可执行校验。
通俗例子
助手说某 API 支持某功能,就核对当前文档或实际工具结果;要求它“再认真想想”可能有帮助,但不能代替外部核验。
深入解释
**为什么会出现编造:**模型擅长生成符合上下文的内容,但生成得连贯不保证事实存在。缺少资料、问题有歧义或工具失败时,仍可能生成看起来完整的答案。
**怎样约束到有证据的结果:**给出可靠资料与真实工具返回,核对关键字段和引用,不足时澄清或说明无法确定。让模型“再检查一次”可以辅助,但不能替代外部验证。
易混淆点
模型自检和多次投票仍可能重复同一个错误,不能替代独立证据。
内容来源
- Android · AI Agent 知识手册 · 原条目
ai-Q208