search

yangjianxin1 / GPT2-chitchat

GPT2 for Chinese chitchat/用于中文闲聊的GPT2模型(实现了DialoGPT的MMI思想)
2.99k stars 680 forks source link

有关对预训练模型微调的问题 #128

Open Edisonhimself opened 9 months ago

Edisonhimself commented 9 months ago

作者大佬您好！ 我想先通过“model = GPT2LMHeadModel.from_pretrained(args.pretrained_model)”加载预训练模型然后在它的基础上进行微调 我想问您的代码中这样进行微调的方式是在加载的模型的参数的基础上进行全参数微调吗？