nie-lang / UDIS2

ICCV2023 - Parallax-Tolerant Unsupervised Deep Image Stitching (UDIS++)
Apache License 2.0
173 stars 26 forks source link

Warp方式选择问题 #20

Open fulizi123 opened 9 months ago

fulizi123 commented 9 months ago

您好,我注意到您之前的研究论文“Depth-Aware Multi-Grid Deep Homography Estimation with Contextual Correlation”中,提出可以利用Backward Multi-Grid Deformation的方式代替前向变形,从而实现并行warp计算。但本篇文章中您提出基于TPS的局部变换优势主要是可以利用并行计算,那请问不用之前的方式实现并行计算的出发点是什么呢?是否还有其他的优势呢?

nie-lang commented 9 months ago

之前那边文章的逆向变换有一个要求,就是target mesh (from initial mesh to target mesh) 必须要是规则的,这样才可以并行运算。这种方式对于alignment任务来说是足够的。但是对于stitching中的non-overlapping regions是没有办法做的。所以还是需要一种能并行运算的前向变形才可以。

与传统方法中经典的mesh warping不一样,tps既可以并行运算,又比mesh warping更加smooth。