现象
用户希望实现自动记录未匹配知识库的用户提问,以辅助完善知识库,但无法完成该功能配置或获取对应记录。
可能原因
- 无法自动区分模型未理解提问与知识库无匹配内容的场景,难以精准判定未匹配情况。
- 全自动记录会包含大量测试类无效数据,缺乏筛选机制时数据价值较低。
- 仅可记录归属自身的聊天内容,分享的聊天无法被记录。
- 未匹配知识库的场景下,系统无法直接自动完成记录操作。
排查步骤
- 确认是否尝试配置自动记录未匹配知识库的聊天功能。
- 检查是否存在分享聊天的使用场景,该场景下无法记录相关内容。
- 确认是否需要区分模型理解偏差与知识库无匹配的情况,该判断无法自动完成。
- 查看是否存在主动反馈功能的配置入口,用于收集未匹配场景的提问。
解决与验证
无法实现全自动记录未匹配知识库的聊天内容。可采用主动反馈的方式,在AI回答提示未匹配知识库内容时,收集对应提问。针对分享给C端用户的场景,可配置用户反馈功能,收集未匹配场景的提问。也可筛选应用或知识库调用下的所有聊天记录,针对AI提示未匹配知识库的场景进行手动记录整理。验证方式:发起未匹配知识库的提问,确认无自动记录生成;通过主动反馈功能收集对应问题,完成记录整理。