[FEATURE] 希望支持一次性提交更多文件上传知识库

[YoungZM339]

MaxKB 版本

版本号:v1.1.3 (build at 2024-05-15T17:49, commit: e74ba87)

请描述您的需求或者改进建议

系统最多只允许同时上传50个文件，然而在建设创建专业领域知识库时，有上传超过千份文档到知识库的需求。对于大规模文档的导入，频繁地选定50份文档并上传是一项艰巨的工作。希望系统提供一个大批量文档的上传入口，支持全部文档统一设置智能分段或根据某个配置文件对符合某个规则下的文档进行高级分段，方便建设大规模知识库。

请描述你建议的实现方案

1. 文件批量上传优化：用户在进行批量上传时，每个文件针对一个表单上传，通过一个进度条或列表来每个文件的状态，上传页面维护一个状态列表，使用“成功”、“失败”、“上传中”等状态，并允许用户选择指定或所有上传失败文档是否重试上传。
2. 文件批量分段处理优化：对于大批量文档的上传，在创建知识库时不再提供分段预览，支持全部文档统一设置智能分段或根据某个配置文件对符合某个规则下的文档进行高级分段。
3. 也可以通过维护一个辅助工具或脚本，帮助用户自动分批上传文档和创建知识库的后续处理。

附加信息

No response

[baixin513]

感谢反馈，建议很棒，我们后期会考虑大容量文档上传的解决方案的。

[starnightcyber]

比如，可以起个 python http.server，知识库用 Web 的方式进行爬取 :)