search

songyonger / FADN

An unofficial code for paper "Learning Frequency-aware Dynamic Network for Efficient Super-Resolution"
34 stars 1 forks source link

关于作者原文的可视化结果 #1

Open Wolfybox opened 2 years ago

Wolfybox commented 2 years ago

image

纯讨论，有木有感觉作者原文给的这个Learnable Mask的可视化结果太细节太规整了？

songyonger commented 2 years ago

是的，感觉比DCT好了很多😂。

SFecho commented 2 years ago

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

Wolfybox commented 2 years ago

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

请问实际没有的意思是：你做了实验发现木有，还是说本来应该有，但是作者给出的结果木有😂？

另外图片中的Gibbs现象有参考link嘛，想康一下长啥样😂

Wolfybox commented 2 years ago

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask

SFecho commented 2 years ago

它的训练集也得需要mask，我记得原文是这样的，这个训练集的mask实在频域直接硬截断的，就说是它的label一定是会有吉布斯现象的

------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

SFecho commented 2 years ago

然后再用在DCT中的频域切出来的高中低频作为标签训练网络，重点是它的高频信息，使他提出的模块能够有效的感知图像的高频信息，就是边缘啦、纹理之类的

------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.**@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

SFecho commented 2 years ago

其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧

------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.**@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

Wolfybox commented 2 years ago

它的训练集也得需要mask，我记得原文是这样的，这个训练集的mask实在频域直接硬截断的，就说是它的label一定是会有吉布斯现象的 … ------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

那按照这个道理来说，文中这张图应该是存在Gibbs现象的？ image

Wolfybox commented 2 years ago

然后再用在DCT中的频域切出来的高中低频作为标签训练网络，重点是它的高频信息，使他提出的模块能够有效的感知图像的高频信息，就是边缘啦、纹理之类的 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.**@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

是说DCT loss吧？ image

我觉得这里确实作者说的不够明确，D到底是哪些频率的mask，是一张还是多张，以及每个branch如何对应这些prior mask，其实在这个公式里边没有足够的体现

Wolfybox commented 2 years ago

其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.**@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

全文已经放出来了？另外这篇文章我在CVPR2021的Main conference里没有搜到，怀疑没中，难道是workshop吗？

SFecho commented 2 years ago

说错了，是ICCV21...

------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午3:04 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

全文已经放出来了？另外这篇文章我在CVPR2021的Main conference里没有搜到，怀疑没中，难道是workshop吗？

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

SFecho commented 2 years ago

Learning Frequency-Aware Dynamic Network for Efficient Super-Resolution (thecvf.com)

------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午3:04 @.>; @.**@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

全文已经放出来了？另外这篇文章我在CVPR2021的Main conference里没有搜到，怀疑没中，难道是workshop吗？

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

Wolfybox commented 2 years ago

Learning Frequency-Aware Dynamic Network for Efficient Super-Resolution (thecvf.com) … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午3:04 @.>; @.**@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.> 全文已经放出来了？另外这篇文章我在CVPR2021的Main conference里没有搜到，怀疑没中，难道是workshop吗？ — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.>

谢谢，去看了补充材料，貌似只是多了一些evaluation，貌似没有关于DCT mask的参数设置

SFecho commented 2 years ago

额 好吧 其实分频技巧挺多，我感觉小波、NSCT、NSST都挺靠谱，如果你想试一试的话可以看看这些频域变换

------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午3:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

Learning Frequency-Aware Dynamic Network for Efficient Super-Resolution (thecvf.com) … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午3:04 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.> 全文已经放出来了？另外这篇文章我在CVPR2021的Main conference里没有搜到，怀疑没中，难道是workshop吗？ — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.>

谢谢，去看了补充材料，貌似只是多了一些evaluation，貌似没有关于DCT mask的参数设置

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

Wolfybox commented 2 years ago

额 好吧 其实分频技巧挺多，我感觉小波、NSCT、NSST都挺靠谱，如果你想试一试的话可以看看这些频域变换 … ------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午3:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) Learning Frequency-Aware Dynamic Network for Efficient Super-Resolution (thecvf.com) … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午3:04 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 其实我感觉这篇文章难就难在如何构建合适半径的DCT域的掩膜来合理的分出高中低频，具体的我去年这个时候也发邮件问过作者，作者说论文里都有，可惜我没找到，当时CVPR21的论文cvf里面还没公开，不过现在可以去cvf的补充材料看看，应该是有吧 … ------------------ 原始邮件 ------------------ 发件人: "songyonger/FADN" @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 @.>; @.@.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.> 全文已经放出来了？另外这篇文章我在CVPR2021的Main conference里没有搜到，怀疑没中，难道是workshop吗？ — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.> 谢谢，去看了补充材料，貌似只是多了一些evaluation，貌似没有关于DCT mask的参数设置 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

okay, thx！😂

SFecho commented 1 year ago

额，其实这个是跟信号处理有关，像离散傅里叶变换、余弦变换等直接在频域做硬截断mask的话就会在空间域出现吉布斯现象，就是所谓的振铃

------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午2:39 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。

请问实际没有的意思是：你做了实验发现木有，还是说本来应该有，但是作者给出的结果木有😂？

另外图片中的Gibbs现象有参考link嘛，想康一下长啥样😂

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

SFecho commented 1 year ago

label应该是存在的，但是具体过程我也不太敢确定

------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午2:53 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1)

它的训练集也得需要mask，我记得原文是这样的，这个训练集的mask实在频域直接硬截断的，就说是它的label一定是会有吉布斯现象的 … ------------------ 原始邮件 ------------------ 发件人: "David @.>; 发送时间: 2022年5月4日(星期三) 下午2:40 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [songyonger/FADN] 关于作者原文的可视化结果 (Issue #1) 正常直接对DCT做mask一定会有吉布斯现象，但是实际没有就很费解😂。 不过作者的做法好像不是在频域上mask？而是直接生成空域特征图的mask — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

那按照这个道理来说，文中这张图应该是存在Gibbs现象的？

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>