performance of HF fine-tuned model

[ggoggori]

{monologg/koelectra-small-v3-finetuned-korquad "epoch": 7.0, "eval_samples": 484, "exact_match": 53.75, "f1": 62.69266917293233 }

{monologg/koelectra-small-v2-distilled-korquad-384 "epoch": 7.0, "eval_samples": 487, "exact_match": 47.5, "f1": 55.19781746031747 }

{"monologg/koelectra-base-v3-finetuned-korquad" "epoch": 7.0, "eval_samples": 484, "exact_match": 57.916666666666664, "f1": 66.02462121212123 }

{monologg/koelectra-base-v2-finetuned-korquad-384 "epoch": 7.0, "eval_samples": 487, "exact_match": 58.333333333333336, "f1": 65.92210012210015 }

• 실험하고 계속해서 여기에 업데이트 하겠습니다.
• 모두 동일한 실험조건입니다.

[ggoggori]

왜 eval_samples가 달라졌을까요...?