怎么实现deepseek-coder的lora-finetune呢

deepseek-ai / DeepSeek-Coder

DeepSeek Coder: Let the Code Write Itself

https://coder.deepseek.com/

MIT License

6.61k stars 461 forks source link

Open YCaigogogo opened 9 months ago

YCaigogogo commented 9 months ago

您好，现在的finetune代码只能实现全量ft，怎么实现lora-ft呢

guoday commented 9 months ago

我们并没有尝试lora-ft，你可以尝试使用开源的一些框架，比如peft