AtsukiOsanai / cv_survey

Personal repository for computer vision survey
2 stars 0 forks source link

Context-based Contrastive Learning for Scene Text Recognition #83

Closed AtsukiOsanai closed 2 years ago

AtsukiOsanai commented 2 years ago

Context-based Contrastive Learning for Scene Text Recognition

Information

Summary

サマリ図表

スクリーンショット 2022-11-13 23 18 38 スクリーンショット 2022-11-13 23 18 52

どんな論文か?

STRのRobustnessを改善するためのData Augmentation, Contrastive Leraningを提案。Out-of-Vocに対する精度の低下は学習仮定でimplicitなcontext biasを受けているせいだという仮説を持ち、よりロバストな特徴を得るために新たなCL手法を考案。ConAugと呼ばれる2つのテキスト画像をconcatするaugmentationをbatch内で行い、同じテキスト画像に該当するtime stepの特徴のペアに対しては距離を近づかせ、そうでないペアは距離を話すようなCLを行わせる。代表的なベンチマーク+自作のOut-of-Voc dataset(OutText)において性能を改善

新規性

結果

スクリーンショット 2022-11-13 23 19 15

その他(なぜ通ったか?など)