search

bcmi / DCI-VTON-Virtual-Try-On

[ACM Multimedia 2023] Taming the Power of Diffusion Models for High-Quality Virtual Try-On with Appearance Flow.
https://arxiv.org/abs/2308.06101
MIT License
387 stars 56 forks source link

关于diffusion模型对于衣服细节保护的疑问 #10

Open FYtrace opened 1 year ago

FYtrace commented 1 year ago

感谢作者的优秀工作~我在VITON测试集上进行了模型的测试，具体流程是根据 HR-VITON-issues45 进行了前处理，并根据作者的指示进行warp和diffusion修复。下图1是我获取到的结果图，图2是文章中展示结果图： image image 上述图1从左往右依次是输入衣服图片、人物pose图片、衣服warp后图像、最终试穿图像。如图所示衣服的图案和文字有所形变，不知道是不是我的处理流程存在问题？

lyn-rgb commented 1 year ago

你可以仔细看下文章，作者也说了在文字部分会出现问题。这是因为Diffusion的原理导致的。

FYtrace commented 12 months ago

你可以仔细看下文章，作者也说了在文字部分会出现问题。这是因为Diffusion的原理导致的。

你们有没有测试过Denosing强度影响，或者图案保护，denosing的时候带上图案mask？

nazapip commented 12 months ago

@FYtrace 你好，你嘗試過下裝和連衣裙嗎

感谢作者的优秀工作~我在VITON测试集上进行了模型的测试，具体流程是根据 HR-VITON-issues45 进行了前处理，并根据作者的指示进行warp和diffusion修复。下图1是我获取到的结果图，图2是文章中展示结果图： image image 上述图1从左往右依次是输入衣服图片、人物pose图片、衣服warp后图像、最终试穿图像。如图所示衣服的图案和文字有所形变，不知道是不是我的处理流程存在问题？

StartHua commented 7 months ago

解决了吗？我也是这样效果 57aad38e4ceb9a43e3ec60a414af7de