故障排查GitHub issue2 分钟阅读排错/错误码

解决FastGPT中自动记录未匹配知识库聊天内容的问题

用户希望实现自动记录未匹配知识库的用户提问,以辅助完善知识库,但无法完成该功能配置或获取对应记录。 无法自动区分模型未理解提问与知识库无匹配内容的场景,难以精准判定未匹配情况。 全自动记录会包含大量测试类无效数据,缺乏筛选机制时数据价值较低。 仅可记录归属自身的聊天内容,分享的聊天无法被记录。

现象

用户希望实现自动记录未匹配知识库的用户提问,以辅助完善知识库,但无法完成该功能配置或获取对应记录。

可能原因

  1. 无法自动区分模型未理解提问与知识库无匹配内容的场景,难以精准判定未匹配情况。
  2. 全自动记录会包含大量测试类无效数据,缺乏筛选机制时数据价值较低。
  3. 仅可记录归属自身的聊天内容,分享的聊天无法被记录。
  4. 未匹配知识库的场景下,系统无法直接自动完成记录操作。

排查步骤

  1. 确认是否尝试配置自动记录未匹配知识库的聊天功能。
  2. 检查是否存在分享聊天的使用场景,该场景下无法记录相关内容。
  3. 确认是否需要区分模型理解偏差与知识库无匹配的情况,该判断无法自动完成。
  4. 查看是否存在主动反馈功能的配置入口,用于收集未匹配场景的提问。

解决与验证

无法实现全自动记录未匹配知识库的聊天内容。可采用主动反馈的方式,在AI回答提示未匹配知识库内容时,收集对应提问。针对分享给C端用户的场景,可配置用户反馈功能,收集未匹配场景的提问。也可筛选应用或知识库调用下的所有聊天记录,针对AI提示未匹配知识库的场景进行手动记录整理。验证方式:发起未匹配知识库的提问,确认无自动记录生成;通过主动反馈功能收集对应问题,完成记录整理。

来源: FastGPT GitHub issue #58