search

sbintuitions / JMTEB

The evaluation scripts of JMTEB (Japanese Massive Text Embedding Benchmark)
Creative Commons Attribution Share Alike 4.0 International
24 stars 4 forks source link

Add task/reranking/esci #11

Closed masaya-ohagi closed 5 months ago

masaya-ohagi commented 5 months ago

関連する Issue / PR

https://github.com/sbintuitions/JMTEB/issues/9

PR をマージした後の挙動の変化

Rerankingのタスクを追加

挙動の変更を達成するために行ったこと

esciデータセットに対するdata loader, evaluator, testを追加しました

動作確認