search

lin-tianyu / Stable-Diffusion-Seg

[MICCAI 2024] Codebase for "Stable Diffusion Segmentation for Biomedical Images with Single-step Reverse Process"
https://lin-tianyu.github.io/Stable-Diffusion-Seg/
Other
65 stars 6 forks source link

训练过程中生成的Image #10

Open happywt opened 3 months ago

happywt commented 3 months ago

作者您好，我在使用CVC数据集训练SDSeg时，在logs下的文件夹中，在images里生成了许多图片。如图所示。请问，这些都是什么图片吗？您能解释一下吗？谢谢 f586eb7e5592509be4e19f206f2c64e3 ！

happywt commented 3 months ago

为什么会有关于房子的图像呢？ b824194cb162bc9d54043f397e461ba0

lin-tianyu commented 3 months ago

作者您好，我在使用CVC数据集训练SDSeg时，在logs下的文件夹中，在images里生成了许多图片。如图所示。请问，这些都是什么图片吗？您能解释一下吗？谢谢 f586eb7e5592509be4e19f206f2c64e3 ！

这些图片是训练过程中记录下来的log，他们会显示在tensorboard中，方便我们在训练过程中监视训练过程。（tensorboard会读取这些图片并显示）

lin-tianyu commented 3 months ago

为什么会有关于房子的图像呢？ b824194cb162bc9d54043f397e461ba0

这些房子（教堂）图片的出现是因为SDSeg中的denoising部分使用了SD提供的预训练模型，而这个预训练的数据集正是一个教堂图片的数据集。

模型中使用这个预训练模型只是为了提供一个较好的初始化，对训练的结果不会有太大影响～

happywt commented 3 months ago

作者您好，我在使用CVC数据集训练SDSeg时，在logs下的文件夹中，在images里生成了许多图片。如图所示。请问，这些都是什么图片吗？您能解释一下吗？谢谢 f586eb7e5592509be4e19f206f2c64e3 ！

这些图片是训练过程中记录下来的log，他们会显示在tensorboard中，方便我们在训练过程中监视训练过程。（tensorboard会读取这些图片并显示）

好的，谢谢你~

happywt commented 3 months ago

为什么会有关于房子的图像呢？ b824194cb162bc9d54043f397e461ba0

这些房子（教堂）图片的出现是因为SDSeg中的denoising部分使用了SD提供的预训练模型，而这个预训练的数据集正是一个教堂图片的数据集。

模型中使用这个预训练模型只是为了提供一个较好的初始化，对训练的结果不会有太大影响～

好的，我明白了，谢谢你~

QiyuanY commented 1 week ago

请问progressive代表的是哪个过程

lin-tianyu commented 1 week ago

什么progressive？

QiyuanY commented 1 week ago

image 这里展示的结果中带有progressive，这个过程是指通过采样生成图像的过程吗

lin-tianyu commented 1 week ago

是的。强烈建议使用tensorboard来观察训练过程，会非常清晰。

不过请注意，这里的progressive是不使用任何采样器，逆采样1000步的过程中的图像，而并不是本文所使用的单步采样方式。在log中记录这个只是为了方便对比和debug。