RAG 答案幻觉的自动验证:检索证据一致性与不确定性估计的机制与边界
企业知识库问答中,RAG 答案可能脱离检索证据或凭空编造。本文讨论如何用忠实度检查、语义熵、SelfCheckGPT 采样一致性和隐状态探针自动识别这类幻觉,分析证据缺失、模型过度自信等失效模式,并给出阈值设定、成本与部署边界的工程判断。
共 2 篇文章
企业知识库问答中,RAG 答案可能脱离检索证据或凭空编造。本文讨论如何用忠实度检查、语义熵、SelfCheckGPT 采样一致性和隐状态探针自动识别这类幻觉,分析证据缺失、模型过度自信等失效模式,并给出阈值设定、成本与部署边界的工程判断。
介绍 RAPTOR 方法如何通过递归嵌入、聚类与摘要构建多层树状索引,解决长文档检索中粒度过粗的问题,并与传统分块策略进行对比,讨论工程实现、成本权衡及局限性。