Chinese-LLaMA 1&2、Chinese-Falcon 基础模型；ChatFlow中文对话模型；中文OpenLLaMA模型；NLP预训练/指令微调数据集
3.03k
stars
235
forks
source link
请问OpenLLaMA-13B在转换为hf模型时，convert_llama_from_tencentpretrain_to_hf.py直接复制了词表tokenizer.model，open_llama.model没有用到，是正常的吗？ #94
Open
chk4991 opened 1 year ago
把open_llama.model拷过去覆盖tokenizer.model，然后在config.json中把vocab_size改成50000。