Document Expansion by Query Prediction

[agatan]

• https://arxiv.org/abs/1904.08375

Document からクエリを予測して、それを index することで IR の精度・速度を向上する話。

IR の手法のひとつに Query Expansion というものがある。 あるクエリが与えられたとき、それにマッチしたドキュメントの情報を使ってクエリを拡張し、再度検索する手法。

この論文ではクエリ側ではなく、ドキュメント側を Expand する。 Seq2Seq で document → query を予測、その情報を使って document を拡張する。

えらいところ

• Index の前段階で expand するので、検索自体は Elasticsearch みたいなものがそのまま使える
• Re-Rank の余地がある（ここに別の NN を用いることで SoTA を達成している）
• そのままだすこともできる。爆速。

結果