我开发了一个面向大语言模型的智能数据集构建工具

[yongyang599]

最近我开发了一个面向大语言模型的数据集构建工具 - DatasetLoom 。主要是为了更快地从自己的文档中生成训练数据，用来微调大模型。

用起来很简单：

• 上传文档（支持 PDF 、Word 、Markdown 、TXT 等）
• 自动分块（多种策略可选）
• 自动生成问题和答案（多种策略可选）
• 导出标准格式，可以直接喂给 LLaMA Factory 等工具训练
• 还支持批量任务处理和定时执行，方便日常使用。

项目地址： https://github.com/599yongyang/DatasetLoom

如果你也在做模型微调或者需要准备训练数据，欢迎大家试用。

目前是我一个人在开发和维护可能还有一些小问题。如果遇到什么问题，欢迎 Star 和反馈建议，我会尽快修复，感谢支持！