showlab / Tune-A-Video

[ICCV 2023] Tune-A-Video: One-Shot Tuning of Image Diffusion Models for Text-to-Video Generation
https://tuneavideo.github.io
Apache License 2.0
4.15k stars 377 forks source link

samples文件夹里面出的图是全黑的 #72

Open Jamie-Cheung opened 1 year ago

Jamie-Cheung commented 1 year ago

请问为什么训练100多轮的时候,loss值是nan,并且出的gif图是全黑的。 Steps: 41%|███████████████████████████████████████████████████████████████▏ | 204/500 [19:20<2:45:51, 33.62s/it, lr=3e-5, step_loss=nan

zhangjiewu commented 1 year ago

使用的是默认的参数设置吗?可以调小学习率看loss是否正常。

glimmer16 commented 11 months ago

我用stable-diffusion v2-1训练的时候也会出现类似的情况,调小或调大学习率好像都没有用,loss大概在0.2~0.4之间。请问用v2-1模型训练是否还需要调整其他参数?

wanghao14 commented 10 months ago

同问v2-1生成效果不好的问题,也单独开了一个issue(#85) 说明这个问题,请问v2-1是否和目前的方法不兼容。