MyNiuuu / MOFA-Video

Official Pytorch implementation for MOFA-Video: Controllable Image Animation via Generative Motion Field Adaptions in Frozen Image-to-Video Diffusion Model.
https://myniuuu.github.io/MOFA_Video
Other
358 stars 22 forks source link

花了一天时间装好了,但不会用 #23

Open theoldsong opened 4 days ago

theoldsong commented 4 days ago

有没有具体的操作教程,MOFA-Video-Traj还简单些,另一个MOFA-Video-Hybrid上传了后,怎么画,尤其是后面两个,一个是轨迹,一个是landmark,谁有具体的操作教程?感谢

MyNiuuu commented 4 days ago

所有的程序在运行以后在Gradio界面上面都会有详细的文字教程,可以参考一下

MyNiuuu commented 4 days ago

我在README更新了Gradio Interface的示意图,可以作为参考:Trajectory, Hybrid-VideoDriven, Hybrid-AudioDriven

theoldsong commented 4 days ago

我在README更新了Gradio Interface的示意图,可以作为参考:Trajectory, Hybrid-VideoDriven, Hybrid-AudioDriven

但没有写怎么画,我研究了好久都没明白。能出个简单的操作教程吗,大佬

MyNiuuu commented 4 days ago

我在README更新了Gradio Interface的示意图,可以作为参考:Trajectory, Hybrid-VideoDriven, Hybrid-AudioDriven

但没有写怎么画,我研究了好久都没明白。能出个简单的操作教程吗,大佬

我这几天录一下视频操作演示传上来。

画trajectory的话就是先点一下确定这个trajectory的起点,然后后续点击会确定这个轨迹的经过点。然后你如果想添加一条新的轨迹的话就点击一下 ‘Add Trajectory’ 按钮,再回去点击图片。 Motion Mask和Landmark Mask就是你先选择半径大小,然后点击图片往上面添加mask。

目前这个版本做的相对简单,后续会出一个refine版本的,让UI的操作性变得更强。

theoldsong commented 4 days ago

我在README更新了Gradio Interface的示意图,可以作为参考:Trajectory, Hybrid-VideoDriven, Hybrid-AudioDriven

但没有写怎么画,我研究了好久都没明白。能出个简单的操作教程吗,大佬

我这几天录一下视频操作演示传上来。

画trajectory的话就是先点一下确定这个trajectory的起点,然后后续点击会确定这个轨迹的经过点。然后你如果想添加一条新的轨迹的话就点击一下 ‘Add Trajectory’ 按钮,再回去点击图片。 Motion Mask和Landmark Mask就是你先选择半径大小,然后点击图片往上面添加mask。

目前这个版本做的相对简单,后续会出一个refine版本的,让UI的操作性变得更强。

好的,感谢!