search

AkihikoWatanabe / paper_notes

たまに追加される論文メモ
https://AkihikoWatanabe.github.io/paper_notes
20 stars 0 forks source link

Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks, Reimers+, UKP-TUDA, EMNLP'19 #462

Open AkihikoWatanabe opened 2 years ago

AkihikoWatanabe commented 2 years ago

https://arxiv.org/abs/1908.10084 https://www.sbert.net/

AkihikoWatanabe commented 2 years ago

BERTでトークンをembeddingし、mean poolingすることで生成される文ベクトルを、Siamese Networkを使い距離学習（finetune）させたモデル。

image

文/文章のベクトルを事前学習済みのモデルを使って簡単に求められる。 モデルの一覧は下記：https://www.sbert.net/docs/pretrained_models.html