nie-lang / UDIS2

ICCV2023 - Parallax-Tolerant Unsupervised Deep Image Stitching (UDIS++)
Apache License 2.0
156 stars 23 forks source link

局部区域 #12

Open jia199903 opened 11 months ago

jia199903 commented 11 months ago

请问对于问题9中您的回答应该是对局部区域进行对齐同时保持形状,这个局部区域应该怎样确定呢

nie-lang commented 11 months ago

我觉得这就是后续可以改进的方向之一。我目前有三种思路可以参考,1)像Content-Aware Unsupervised Deep Homography Estimation这篇论文这种自适应学习一个mask,这个mask即暗示了这种局部区域; 2)用后续任务(seam-cutting)作为指导,进行一种以composition任务导向的对齐学习,而不是为了对齐而对齐,这种思路可参考传统的SEAGULL拼接方法;3)学习多个对齐变换(可能是根据对齐不同的主平面为目标产生不同的变换),然后选出其中对seam cutting最有利的对齐变换,,可参考Unsupervised Deep Plane-Aware Multi-homography Learning for Image Alignment。