现象
用户在使用FastGPT管理知识库时,遇到文件上传限制问题,无法通过常规页面操作批量上传大量文件,单文件上传流程繁琐,难以高效完成大规模知识库文件导入。
可能原因
当前线程未明确披露具体限制的技术原因,需结合实际部署环境确认,常见关联场景为平台内置单文件上传数量或大小限制,或缺乏官方提供的批量导入接口。
排查步骤
- 获取登录令牌:打开浏览器F12开发者工具,切换至Application面板,在Storage/local storage中查找并复制Token,其格式为类似xxx.yyy.zzz的字符串。
- 获取知识库ID:在FastGPT平台手动创建目标知识库,进入知识库设置页面,复制对应的dataset_id参数。
- 整理文件列表:收集需要上传的本地文件的完整路径,例如['/data/1.txt', '/data/2.txt', '/data/3.txt']。
- 确认接口地址:根据FastGPT实际部署的后端服务地址,替换示例中的
http://xxx:8222为真实接口基础地址。
解决与验证
通过依次调用三个官方后端接口完成批量文件上传与知识库导入:
- 上传文件:调用
http://xxx:8222/api/common/file/upload接口,请求参数包含metadata={"datasetId": dataset_id}、bucketName="dataset",上传本地文件的二进制流,同时在请求头中携带Token参数,超时设置为30秒。 - 创建集合:调用
http://xxx:8222/api/core/dataset/collection/create接口,传入知识库ID、文件名与上一步获取的fileid,获取对应的集合IDcollectionid。 - 推送数据:调用
http://xxx:8222/api/core/dataset/data/pushData接口,传入集合ID与文本内容,系统将自动构建向量索引。
循环遍历所有待上传文件,依次执行上述流程即可完成批量导入。验证时可前往对应知识库页面,查看已成功导入的文件与集合信息。