search

KLUE-benchmark / KLUE

📖 Korean NLU Benchmark
https://klue-benchmark.com
Creative Commons Attribution Share Alike 4.0 International
554 stars 55 forks source link

[KLUE-NLI] Submission Failure Error #46

Open kikitoto68 opened 3 months ago

kikitoto68 commented 3 months ago

안녕하세요? KLUE-NLI에 모델을 업로드하였는데 "Submission Failure Error"가 발생하여 정상적인 평가가 가능하도록 조치를 부탁드립니다.

image

(Optional)

JunYeopLee commented 3 months ago

@kikitoto68

안녕하세요.

문의주셔서 감사합니다.

현재 KLUE 리더보드는 GPU 수급 이슈로 운영되지 않고 있습니다. 제출탭도 근 시일 내에 Disable 될 예정입니다.

해당 페이지에서는 KLUE paper 와 Github 을 통해 데이터셋 다운로드만 제공하고 있음을 알려드립니다.

감사합니다.

kikitoto68 commented 3 months ago

안녕하세요?

제가 KLUE-NLI 및 KLUE-TC에 대한 리더보드 제출을 준비하였습니다. 현재 리더보드 운영 종료에 대한 사전 공지가 없는 상황인데 제출하지 못하는 상황이라니 안타깝습니다.

KLUE-NLI 및 KLUE-TC의 Inference는 몇 분이내로 소요되어 크게 GPU 자원이 필요하지 않을 것 같은데 제출이 가능하도록 조치를 부탁드립니다.

감사합니다.