search

shibing624 / text2vec

text2vec, text to vector. 文本向量表征工具，把文本转化为向量矩阵，实现了Word2Vec、RankBM25、Sentence-BERT、CoSENT等文本表征、文本相似度计算模型，开箱即用。
https://pypi.org/project/text2vec/
Apache License 2.0
4.36k stars 391 forks source link

模型微调问题 #141

Open CathyKitten opened 9 months ago

CathyKitten commented 9 months ago

您好！想用自己的jsonl文件，微调text2vec-base-multilingual模型，用python training_sup_text_matching_model_jsonl_data.py --model_arch cosent --do_train --do_predict --num_epochs 10 指令。会出现如下报错，OSError: ./outputs/jsonl-model does not appear to have a file named config.json. Checkout 'https://huggingface.co/./outputs/jsonl-model/None' for available files.。请问应该怎么修改指令或代码。 image

CathyKitten commented 9 months ago

就是模型保存后，好像没有生成config.json文件 image

shibing624 commented 9 months ago

训练完，会生成config.json

lili4cityu commented 9 months ago

我也遇到了这个问题，需要手动创建你要保存的模型目录