search

FreedomIntelligence / HuatuoGPT-II

HuatuoGPT2, One-stage Training for Medical Adaption of LLMs. (An Open Medical GPT)
358 stars 59 forks source link

checkpoint文件过大？ #10

Open FlyingCat-fa opened 10 months ago

FlyingCat-fa commented 10 months ago

HuatuoGPT-II 7B模型的模型文件大小为30G，而baichuan2 7B只有14G的文件大小，请问这是正常的么

StevenZHB commented 10 months ago

Hi @FlyingCat-fa : 这是正常的，我们上传的是全精度的 checkpoint，baichuan 2-7B 上传的是半精度的，所以会是 baichuan2-7B 的两倍大小。 Best, Hongbo