mulns / PerVFI

Official code base of "Perception-Oriented Video Frame Interpolation via Asymmetric Blending" (CVPR 2024), also denoted as ''PerVFI''.
https://openaccess.thecvf.com/content/CVPR2024/papers/Wu_Perception-Oriented_Video_Frame_Interpolation_via_Asymmetric_Blending_CVPR_2024_paper.pdf
Apache License 2.0
50 stars 4 forks source link

效果对其问题 #2

Open Deng555 opened 4 months ago

Deng555 commented 4 months ago

你好,我用raft+pervfi|interpolation X2,跑了一段视频,生成的插帧图片虚影比较严重(下图中,第2和第4张有虚影的是生成的),想问一下,是不是我设置哪里有问题?

combin

对比{raft+pervfi,gma+pervfi,gmflow+pervfi}这几种,目前觉得gma+pervfi效果比raft+pervfi好,gmflow+pervfi耗时最大。 combin2

mulns commented 4 months ago

这里取决于光流的准确性,比如在这个case里gma的光流准确性更好,获得的图像质量也就相应地有所提升。我的建议是如果你发现你的使用场景里有一个比较稳定且效果好的光流估计网络,就用这个网络级联PerVFI,进行简单的fine-tune,从而获得最佳体验。

Deng555 commented 4 months ago

这里取决于光流的准确性,比如在这个case里gma的光流准确性更好,获得的图像质量也就相应地有所提升。我的建议是如果你发现你的使用场景里有一个比较稳定且效果好的光流估计网络,就用这个网络级联PerVFI,进行简单的fine-tune,从而获得最佳体验。

好的,我试一下,万分感谢!