Transformer study group - Githubissues

AIML-K / bamboo-forest

Anyone can say anything in bamboo forest. It's another sandbox but greener.

GNU Affero General Public License v3.0

5 stars 0 forks source link

Transformer study group #53

Open d-h-lee opened 2 years ago

d-h-lee commented 2 years ago

트랜스포머를 알아보는 스터디그룹을 진행하려 합니다.

목표로는

트랜스포머 작동원리 파악 (이건 2차창작 가공물 등등의 자료 찾아보면 꽤 나옵니다)
트랜스포머를 실제로 작동시켜서, 파악한 원리대로 돌아가는지 확인 (이건 직접 해봐야합니다)
학기말부터 다음학기시작할때쯤 사이 기간 중에 내부 워크샵으로 발표

"워크샵"은 날짜에 따라 다르지만, 그것 제외하고는 1학기말 (6월말) 까지 진행하는것이 목표입니다.

힘을 보태고 싶은 분들은 코멘트 달아주세요.

d-h-lee commented 2 years ago

https://github.com/AIML-K/attention-is-all-you-need 리포에서 작업을 이어가도록 하겠습니다