Closed Derican closed 1 year ago
lora训练完成后用infer_lora_finetuning.py推断,显示
infer_lora_finetuning.py
============================================================ lora info trainable params: 0 || all params: 6,245,533,696 || trainable%: 0.0
并且response为空,请问是哪里的config没有设置还是训练没有配置好
需要调参,例如增大lora rank , 增大训练epoch 等等
明白了,换了个优化器解决了。
lora训练完成后用
infer_lora_finetuning.py
推断,显示并且response为空,请问是哪里的config没有设置还是训练没有配置好