boostcampaitech2 / klue-level2-nlp-02

klue-level2-nlp-02 created by GitHub Classroom
0 stars 6 forks source link

Typed Entity Marker 실험 결과입니다. #14

Open sangHa0411 opened 2 years ago

sangHa0411 commented 2 years ago

Typed Entity Marker 실험에 대해서 정리해봤습니다.

Training Environment

PLM : monologg/koelectra-base-v3-discriminator
epochs : 10
learning rate : 5e-5
warmup_steps : 500
weight_decay : 1e-4
train_batch_size : 16
eval_batch_size : 16

1. Sentence Structure

2. F1 Score Result

3. Auprc Result

4. 제출 결과

직접 제출하고 결과를 확인해봤습니다.

  1. Punct
    • F1 : 63.190
    • Auprc : 64.557
  2. Typed Entity
    • F1 : 61.024
    • Auprc : 56.416

Validation Set에서의 결과와는 달리 실제 제출결과 Punct가 성능이 더 좋은 것으로 파악이 되었습니다!

스크린샷 2021-10-01 오전 12 50 43
j961224 commented 2 years ago

깔끔한 정리 감사합니다!

sangHa0411 commented 2 years ago

감사합니다!