yangjianxin1 / GPT2-chitchat

GPT2 for Chinese chitchat/用于中文闲聊的GPT2模型(实现了DialoGPT的MMI思想)
2.98k stars 678 forks source link

vocab #90

Open pureblacker opened 2 years ago

pureblacker commented 2 years ago

请问一下能用bert-base-chinese模型里面自带的词表吗?请问一下您的词表是怎么来的呀?是用训练集分字得到的吗

pureblacker commented 2 years ago

请问一下能用bert-base-chinese模型里面自带的词表吗?请问一下您的词表是怎么来的呀?是用训练集分字得到的吗

小白,十分感谢回答

yangjianxin1 commented 2 years ago

bert-base-chinese词表是huggingface的模型库提供的,也可以按照自己的需求构造词表