Yujun-Shi / DragDiffusion

[CVPR2024, Highlight] Official code for DragDiffusion
https://yujun-shi.github.io/projects/dragdiffusion.html
Apache License 2.0
1.16k stars 88 forks source link

生成结果异常(掩码mask未起作用,同类物体同步变化) #16

Closed xuyu666 closed 1 year ago

xuyu666 commented 1 year ago

人脸经过复制后拼接作为输入图像,随后更改提示语句进行推理,出来的结果如下。 能给点建议么,因为有时候一张图像里面有很多重复类似的物体时,也会出现这样的情况。 img_cat

image

image

danieltanhx commented 1 year ago

try out a set of data(need to fine tune) instead of just one and --max_train_steps=1000 until 5000, i fine tuned my own lora model to expand the latent space so that this gradio app can modify it later

Yujun-Shi commented 1 year ago

你好 @xuyu666 ,我尝试了一下你这个例子,似乎我这边是可以的,你可以再试一下。顺便提一下,在我们新的release当中已经把lora训练集成到用户界面里了,可以直接在用户界面里训练lora哈。还有一点,目前最好是输入一个正方形的图片,后续的更新版本里我们会支持任意比例的图片。

image
xuyu666 commented 1 year ago

好的哈,谢谢你~