知识库问答的未命中处理
腾讯元器初学者如何搭建带知识库的工作流并验证问答结果
知识库问答中,真正决定系统可信度的,不是“能否回答”,而是“没有依据时能否正确停下”。未命中处理应被视为问答链路的核心能力:当资料中没有明确答案,系统应说明暂未找到相关内容,而不是依靠常识、语气相似的片段或模型推测生成确定回答。

先定义未命中
未命中不只包括资料中完全没有某个主题,还包括关键词相似但概念不同的情况。例如,资料讨论“账号权限”,用户询问“文件访问权限”,两者存在词语重合,却不能据此判断答案相同。相反,文档使用“管理员可创建成员”,用户问“谁能添加新成员”,虽然措辞不同,但事实可能相同,这属于应当通过语义理解命中的问题。
因此,测试至少应覆盖三类场景:资料明确写过的问题、需要综合多个段落的问题、资料完全没有依据的问题。判断结果时,不能只看回答是否流畅,还要核对关键事实能否在原文中定位,以及系统是否把不确定内容说成了确定事实。
让流程显式处理
最小可用链路可以保持为:
开始节点 → 知识库问答节点 → 回复节点 → 结束节点
在智能体说明或知识库问答节点中,明确要求优先依据已绑定资料;资料没有明确依据时,返回“未找到相关资料”或类似表达,不自行编造。回复节点必须绑定本次运行的知识库回答,不能使用固定文本,否则未命中和命中结果都可能被替换成同一句话。
调试时要查看节点运行记录,确认用户问题确实传入查询变量,知识库节点使用的是正确知识库,回复节点引用的是当前输出,并且未命中时没有沿用上一次测试结果。若原文事实都无法回答,应先检查文档处理状态、知识库绑定和变量映射,不要急于增加复杂节点。
未命中后的分流
基础链路稳定后,再按来源分流:个人资料问题优先走知识库;明确需要当前公开信息的问题,可进入联网搜索分支;无法判断或没有可靠依据的问题,直接回复澄清或无法确认。每增加一个分支,都应使用同一组固定问题回归测试,重点观察是否改变了原有命中结果。
未命中处理的目标不是让系统“尽量给出答案”,而是准确区分知道、不知道和需要外部信息三种状态。只有把边界说清楚,知识库问答才具备可验证、可维护的可靠性。



参与讨论
三类测试场景这个划分挺清晰的
回复节点不能写死这句话提醒得好
关键词相似但概念不同这点太真实了
未命中确实比答错更值得重视
这个思路很实用,先让系统学会说不知道