[스터디 종료] 거꾸로 읽는 self-supervised-learning 시즌2: Contrastive learning on NLP

• [마감] 신청 Google form (8/6까지)
• 거꾸로 읽는 SSL 이번에는 NLP 분야로 넘어 왔습니다! :)
• 이번에는 Contrastive Learning이 적용된 NLP논문에 중하여 역사적으로 의미가 있었던 논문을 살펴봅니다.
• 해당 논문에서 제시하는 메소드의 특징 그리고 역사적으로 평가되는 이유에 대해서 즐겁게 토론하는 시간을 가집니다.
• [스터디 종료] 2022.10.29

기간

• 8/13 ~ 10/29 (11주간, 추석주간 제외)

발표 논문 및 순서

google sheet

In-batch negative training

Positive mining

Hard negative mining

Contrastive learning with model scaling

관련 링크

• 거꾸로 읽는 self-supervised-learning 파트1 repo
• 거꾸로 읽는 SSL 유튭 채널