微调后"vocab_size": 32001

LlamaFamily / Llama-Chinese

Llama中文社区，Llama3在线体验和微调模型已开放，实时汇总最新Llama3学习资料，已将所有代码更新适配Llama3，构建最好的中文Llama大模型，完全开源可商用

https://llama.family

14.01k stars 1.26k forks source link

Open chris-rong opened 10 months ago

chris-rong commented 10 months ago

为什么微调之后vocab_size变为32001

Rayrtfr commented 10 months ago

为什么微调之后vocab_size变为32001

您使用的代码是什么呀