如何使用自己的数据集

jianzhnie / LLamaTuner

Easy and Efficient Finetuning LLMs. (Supported LLama, LLama2, LLama3, Qwen, Baichuan, GLM , Falcon) 大模型高效量化训练+部署.

https://jianzhnie.github.io/llmtech/

Apache License 2.0

576 stars 63 forks source link

Open clannadcl opened 1 year ago

clannadcl commented 1 year ago

创建自己数据集的yaml文件只需要指定'local_path'以及‘dataset_format’不对吗，其他yaml文件会有特别多数据，这里有点不清楚。感谢您能解答

jianzhnie commented 1 year ago

config 下的 yaml 文件是参考模板，可以参考创建一个新的yaml 文件，使用自己的数据集