chaoyi-wu / Finetune_LLAMA

简单易懂的LLaMA微调指南。
354 stars 34 forks source link

咱们这个是否支持出LLAMA之外的其他模型呢 #7

Open xsailor511 opened 1 year ago

chaoyi-wu commented 1 year ago

理论上是支持的,但因为是基于transfomers.trainer 实现的,主要看各个加速手段,trainer库里支不支持,只要库包里有对应的model应该是一样的。