search

Linfeng-Tang / SeAFusion

The code of " Image fusion in the loop of high-level vision tasks: A semantic-aware real-time infrared and visible image fusion network"
MIT License
184 stars 34 forks source link

您好，请问每次的生成图像会有较大差距的情况么 #17

Open chengyu89527 opened 1 year ago

chengyu89527 commented 1 year ago

您好： 没有冒犯的意思，我用这个代码套用了医疗分割的任务，运行了几次最后的融合图像会有较大差距，可能都偏暗或者偏亮，请问这是正常的吗

Linfeng-Tang commented 1 year ago

约束融合图像的content loss 可能得进一步根据医学图像融合的特点来调整，直接套用的话可能会出现问题。

chengyu89527 commented 1 year ago

我是进行了一些调整，有趣的是这个结果会有比较大的差距，甚至会出现颜色翻转的情况（有的时候是正常的），请问自然图像肯定不会出现类似现象么？  

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2023年5月5日(星期五) 下午4:44 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

约束融合图像的content loss 可能得进一步根据医学图像融合的特点来调整，直接套用的话可能会出现问题。

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

Linfeng-Tang commented 1 year ago

这个我也不是特别清楚额 因为在原始的代码中融合网络只负责处理Y通道 而色彩通道是直接用的可见光图像的Cb和Cr通道 应该不会出现色彩反转的情况。

chengyu89527 commented 1 year ago

谢谢谢谢，医疗影像相当于只有一个通道  

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2023年5月5日(星期五) 下午4:54 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

这个我也不是特别清楚额 因为在原始的代码中融合网络只负责处理Y通道 而色彩通道是直接用的可见光图像的Cb和Cr通道 应该不会出现色彩反转的情况。

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

Linfeng-Tang commented 1 year ago

那怎么会出现颜色反转呢

chengyu89527 commented 1 year ago

整理好了，和您交流下  

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2023年5月5日(星期五) 下午4:59 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

那怎么会出现颜色反转呢

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

mukysa commented 1 year ago

你的输入影像有根据范围做过归一化吗？我做遥感影像的时候，因为归一化范围设置错误问题出现过颜色反转

chengyu89527 commented 1 year ago

一开始做了，但是第二次fusion的时候就没做，可能是这方面的问题，而且反转也不全是坏事，谢谢您提醒  

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2023年5月6日(星期六) 晚上6:12 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

你的输入影像有根据范围做过归一化吗？我做遥感影像的时候，因为归一化范围设置错误问题出现过颜色反转

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

chengyu89527 commented 1 year ago

您好，久等了，我稍微整理了下两次融合的结果，我现在的的任务是把s中心和u中心对应的图像融合起来，并且保证分割效果。因为医疗影像都是单通道的，所以就直接用您单通道方法进行融合了，去掉了GRB和cr转换过程。两张图分别是两次训练的测试结果，感觉会有比较大的变化空间，不知道怎么能控制下。原图都是经过归一化的，问题可能不出在这。总之谢谢您的时间！！

 

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2023年5月6日(星期六) 晚上6:12 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

你的输入影像有根据范围做过归一化吗？我做遥感影像的时候，因为归一化范围设置错误问题出现过颜色反转

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

chengyu89527 commented 1 year ago

你好： 不知道您是否方便交换下稍微个人的联系方式，我们用邮件这么交流总觉得有点困难，我点电话微信号是17521311309

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: "Linfeng-Tang/SeAFusion" @.>; 发送时间: 2023年5月6日(星期六) 晚上6:12 @.>; @.**@.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

你的输入影像有根据范围做过归一化吗？我做遥感影像的时候，因为归一化范围设置错误问题出现过颜色反转

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

Linfeng-Tang commented 1 year ago

你可以加我QQ：2458707789， 备注姓名+学校。

mukysa commented 1 year ago

你好： 不知道您是否方便交换下稍微个人的联系方式，我们用邮件这么交流总觉得有点困难，我点电话微信号是17521311309 成大宇 @.   … ------------------ 原始邮件 ------------------ 发件人: "Linfeng-Tang/SeAFusion" @.>; 发送时间: 2023年5月6日(星期六) 晚上6:12 @.>; @*.**@*.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17) 你的输入影像有根据范围做过归一化吗？我做遥感影像的时候，因为归一化范围设置错误问题出现过颜色反转 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.>

你好，想问一下你最终解决了颜色反转的问题了吗？

chengyu89527 commented 1 year ago

其实只要去掉梯度里的绝对值，是可以的解决反转问题的。加了一个分割模块后，被分割的部分会有所膨胀，不知道您有没有遇到过类似的问题  

成大宇 @.***

 

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2023年5月13日(星期六) 凌晨0:02 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17)

你好： 不知道您是否方便交换下稍微个人的联系方式，我们用邮件这么交流总觉得有点困难，我点电话微信号是17521311309 成大宇 @.   … ------------------ 原始邮件 ------------------ 发件人: "Linfeng-Tang/SeAFusion" @.>; 发送时间: 2023年5月6日(星期六) 晚上6:12 @.>; @.@.>; 主题: Re: [Linfeng-Tang/SeAFusion] 您好，请问每次的生成图像会有较大差距的情况么 (Issue #17) 你的输入影像有根据范围做过归一化吗？我做遥感影像的时候，因为归一化范围设置错误问题出现过颜色反转 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.>

你好，想问一下你最终解决了颜色反转的问题了吗？

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

Linfeng-Tang commented 1 year ago

这个没有耶