An Image is Worth More Than a Thousand Words: Towards Disentanglement in the Wild

[knok]

Aviv Gabbay, Niv Cohen, Yedid Hoshen

https://arxiv.org/abs/2106.15610v1

概要

半教師ありdisentanglementの提案。 教師なしdisantnglementには inductive biasが必要という制約がある。 教師ありdisentanglementは膨大な特徴すべてをアノテーションする必要があり、現実的でない。 そこで半教師あり手法を考える。

さらに訓練済みCLIPモデルと組み合わせて、ゼロショットラベリングを提案。

他の手法(TediGAN, StyleCLIP)と比較してより良好な結果を得られた。

プロジェクトページ http://www.vision.huji.ac.il/zerodim/

実装は今後公開予定とのこと。