EMNLP2020まとめ

[Sosuke115]

リンク

https://www.aclweb.org/anthology/events/emnlp-2020/#2020emnlp-main

概要

興味ありそうなEMNLP2020の論文をテーマ別にまとめていく

Adversarial Attack

• Adversarial Attack and Defense of Structured Prediction Models seq2seqで構文が正しいadversarial exampleを生成。依存関係認識、POS-tag. で効果を示した。
• TextAttack: A Framework for Adversarial Attacks, Data Augmentation, and Adversarial Training in NLP nlpにおけるAdversarial attack系の攻撃のpython実装

Data Augmentation

• Local Additivity Based Data Augmentation for Semi-supervised NER BERTの隠れ層でmixup を行う。NERで優位性

関連研究

• Snippext（出力層でmixup）

• AdvAug（埋め込み層でmixup）

• MixText（隠れ層でmixup）

• SSMBA: Self-Supervised Manifold Based Data Augmentation for Improving Out-of-Domain Robustness https://github.com/Sosuke115/paper-reading/issues/28 で解説

• Sequence-Level Mixed Sample Data Augmentation 文における人工的なmixup

SeqMix: Augmenting Active Sequence Labeling via Sequence Mixup

Domain Adaptation

Knowledge Base

Knowledge Distillation

Multilinguality

• Cross-lingual Alignment Methods for Multilingual BERT: A Comparative Study 多言語文脈ベクトルをアラインする方法を比較（１） 対訳文（２）教師辞書つき線形写像（３）ファインチューニング

• Entity Linking in 100 Languages 多言語Entity Linking