modelscope / FunASR

A Fundamental End-to-End Speech Recognition Toolkit and Open Source SOTA Pretrained Models, Supporting Speech Recognition, Voice Activity Detection, Text Post-processing etc.
https://www.funasr.com
Other
6.99k stars 744 forks source link

使用微调之后的模型音频识别为空 #2181

Open fjt12138 opened 2 weeks ago

fjt12138 commented 2 weeks ago

What is your question?

我使用了paraformer-zh为预训练模型,在我的下游数据上进行微调,微调了之后调用模型识别我的音频,使用微调模型识别不出,使用预训练的模型可以识别,我不知道是哪里出现的问题。

Code

我的微调脚本代码是: image

我的调用模型代码如图: image 最后我的结果如图: image 再次请求作者帮助。

LauraGPT commented 1 week ago

一个简单的排查方案是,你copy我们官方模型一份,然后把里面的model.pt替换成你finetune后的,例如,最后一个ckpt,然后用一样的方法去推理,看看是否有输出