search

ssbuild / chatglm_finetuning

chatglm 6b finetuning and alpaca finetuning
1.54k stars 176 forks source link

HFValidationError:请问这个错误怎么解决 #189

Closed hkhkq closed 1 year ago

hkhkq commented 1 year ago

HFValidationError: Repo id must be in the form 'repo_name' or 'namespace/repo_name': '/data/nlp/pre_models/torch/chatglm/chatglm-6b'. Use repo_type argument if needed.

ssbuild commented 1 year ago

离线下载权重 ， 然后修改对应路径。

hkhkq commented 1 year ago

大哥能给下具体的操作方法吗？在哪里下载，怎么改路径

ssbuild commented 1 year ago

看下readme

hkhkq commented 1 year ago

tokenizer, config, , = dataHelper.load_tokenizer_and_config(tokenizer_class_name=C │ │ 124 │ assert tokenizer.eos_token_id == 130005 这里错的

ssbuild commented 1 year ago

这个错误是官方更新词典造成的，重新下载权重词典等即可。

hkhkq commented 1 year ago

预训练权重我下了，这里可能我没弄对，这里放在哪里，怎么配置不清楚，麻烦再说详细点，多谢

hkhkq commented 1 year ago

这个错误是官方更新词典造成的，重新下载权重词典等即可。

RuntimeError: Internal: src/sentencepiece_processor.cc(1101) [model_proto->ParseFromArray(serialized.data(), serialized.size())] 现在又报这个错了

ssbuild commented 1 year ago

这个错误是官方更新词典造成的，重新下载权重词典等即可。

RuntimeError: Internal: src/sentencepiece_processor.cc(1101) [model_proto->ParseFromArray(serialized.data(), serialized.size())] 现在又报这个错了

代码更新一下，删除 output 试试