Open knok opened 2 years ago
Ruibo Liu, Guoqing Zheng, Shashank Gupta, Radhika Gaonkar, Chongyang Gao, Soroush Vosoughi, Milad Shokouhi, Ahmed Hassan Awadallah
https://arxiv.org/abs/2204.03084v1
外部知識を参照したテキスト生成を行う。 一般的なテキスト生成は必ずしも事実に合う出力を行わない問題がある。 外部知識を参照してテキストデコードを行う手法の提案。
先行研究は静的な知識に基づいたファインチューニングといったアプローチがあったが、この手法は動的に知識を組み込む。
実装 https://github.com/microsoft/KID
Ruibo Liu, Guoqing Zheng, Shashank Gupta, Radhika Gaonkar, Chongyang Gao, Soroush Vosoughi, Milad Shokouhi, Ahmed Hassan Awadallah
https://arxiv.org/abs/2204.03084v1
概要
外部知識を参照したテキスト生成を行う。 一般的なテキスト生成は必ずしも事実に合う出力を行わない問題がある。 外部知識を参照してテキストデコードを行う手法の提案。
先行研究は静的な知識に基づいたファインチューニングといったアプローチがあったが、この手法は動的に知識を組み込む。
実装 https://github.com/microsoft/KID