search

TMElyralab / MuseTalk

MuseTalk: Real-Time High Quality Lip Synchorization with Latent Space Inpainting
Other
1.85k stars 223 forks source link

视频的前1～2秒嘴部有明显的抖动，不丝滑 #11

Open fengxu-sz opened 2 months ago

itechmusic commented 2 months ago

Hello，请问方便分享一下你的视频和音频吗？我们研究一下。

fengxu-sz commented 2 months ago

https://github.com/TMElyralab/MuseTalk/assets/13326729/83fd7b2b-bdc0-42fb-8523-f0e0c7b52c56

这个是合成后的视频，后面都挺好的，就前面1s能看出嘴部明显的抖动

fengxu-sz commented 2 months ago

视频和音频素材.zip

fengxu-sz commented 2 months ago

bbox_shift调到最低-13不那么明显了

jinqinn commented 1 month ago

调整bb0x_shift并不能完全解决问题，在说话期间停顿、静音等情况时都会遇到嘴巴抖动问题，我理解这是没有处理好静音推理的结果。