yangyi0818 / DPARNet

Dual-Path Attention and Recurrent Network for speech separation
15 stars 1 forks source link

这个可以单通道流式推理吗? #6

Open zuowanbushiwo opened 1 year ago

zuowanbushiwo commented 1 year ago

你好 不知道可不可以单通道的在线处理?结果怎么样?

yangyi0818 commented 11 months ago

您好! 首先,本实验是在DPT-FSNET: DUAL-PATH TRANSFORMER BASED FULL-BAND AND SUB-BAND FUSION NETWORK FOR SPEECH ENHANCEMENT该文模型架构的基础上进行改进,原始文章针对的是单通道语音增强问题,虽然未在本实验模型上尝试过单通道语音分离,但根据经验,该模型应该是可以用于该任务上的;其次,本实验模型可以进行在线处理(需要对attention、LSTM等结构进行修改),在线性能在SI-SDR上会比离线的性能降低2 dB - 3 dB左右。