TMElyralab / MuseTalk

MuseTalk: Real-Time High Quality Lip Synchorization with Latent Space Inpainting
Other
2.51k stars 306 forks source link

参考视频>25FPS需要如何处理 #94

Closed sj123sheng closed 4 months ago

sj123sheng commented 4 months ago

如原视频为30FPS或者60FPS 是先将原视频变成25FPS然后再生成吗 还是在执行的时候加上--fps 30(对应视频真实数值)来处理效果更好

czk32611 commented 4 months ago

hello,没有测试过这种情况的效果,你可以对比一下,代码是支持直接推理30fps和60fps的,会自动识别视频的fps

sj123sheng commented 4 months ago

hello,没有测试过这种情况的效果,你可以对比一下,代码是支持直接推理30fps和60fps的,会自动识别视频的fps

你好,代码里好像没看到不输入--fps参数,会自动识别视频的fps的逻辑,好像会按照默认的25FPS值来处理?

sj123sheng commented 4 months ago

image image image

我发现原视频30fps,生成视频的时候没有输入fps参数,生成的视频就变成25fps了

czk32611 commented 4 months ago

image image image

我发现原视频30fps,生成视频的时候没有输入fps参数,生成的视频就变成25fps了

realtime_inference.py因为是会预先存储视觉素材,没有保存fps,按照25fps处理了。 inference.py会按照视频fps进行推理。

我们是建议使用25fps进行推理的,因为训练是用25fps。