fgenie / rims_minimal

Been lazy enough to pull over again to the end!
0 stars 1 forks source link

feat: Add MATH eval #6

Closed seanexp closed 5 months ago

seanexp commented 5 months ago

https://github.com/EleutherAI/lm-evaluation-harness/blob/main/lm_eval/tasks/minerva_math/utils.py

에 있는 MATH 평가 관련 util 함수를 가져옵니다.

MATH 의 baseline output 에서 잘 동작하는 것 확인했습니다.

resolved: #5