Fast Deep Stereo with 2D Convolutional Processing of Cost Signatures

[tkuri]

論文概要

かなり高速でそこそこ性能が高いDeepなStereo Depth手法。キモは軽量なTraditionalな方法(Census等)で複数のCost Volumeを計算してそれらをコンカチしてから1x1Convで特徴量マップに変換していること。そうすることで後段が2D ConvのみのForwardで良くなり計算量が削減可能。

1080Tiでリアルタイム処理に十分な速度(48fps)を達成。従来手法はStereo Depthアルゴリズムそのもの(Cost Volume生成含む)を全部NNで置き換えることに主眼を置いていたが、この手法では計算コストを2D Convに集中させるという方針をとったということ。

https://openaccess.thecvf.com/content_WACV_2020/html/Yee_Fast_Deep_Stereo_with_2D_Convolutional_Processing_of_Cost_Signatures_WACV_2020_paper.html

Code

https://github.com/ayanc/fdscs