TMElyralab / MuseTalk

MuseTalk: Real-Time High Quality Lip Synchorization with Latent Space Inpainting
Other
2.51k stars 306 forks source link

请教视频模板造成下巴拉伸问题,谢谢! #111

Open flysky126 opened 4 months ago

flysky126 commented 4 months ago

由于输入是有一张masked图和模板原图组成,在生成修复帧的时候,模板图的动作会影响到生成的修复帧(例如模板是张开嘴部的,但是修复帧是要嘴巴闭合,这样就造成下巴会向下拉扯),请教下大家这个问题了。。。

aidenyzhang commented 2 months ago

在musetalk模型中,可以通过调节bbox参数来微调嘴巴的张开幅度。您可以先试下效果。 较大范围的改动,当前模型还不支持。