RetroGAN: A Cyclic Post-Specialization System for Improving Out-of-Knowledge and Rare Word Representations

[knok]

Pedro Colon-Hernandez, Yida Xin, Henry Lieberman, Catherine Havasi, Cynthia Breazeal, Peter Chin

https://arxiv.org/abs/2108.12941v1

概要

単語ベクトルを訓練後になんらかの知識に基づいて類似したもの、相反するものをそれぞれ近づけたり離したりする retrofitting は、指定された単語群のみにしか影響しないという課題がある。 この論文ではCycleGANを参考にしたRetroGANを考案し、ドメイン外の単語にもうまく適用できるようにした。

実装 https://github.com/pedrocolon93/retrogan