您好，请问1.1版本更新的具体内容是什么？

open-compass / MMBench

Official Repo of "MMBench: Is Your Multi-modal Model an All-around Player?"

Apache License 2.0

163 stars 10 forks source link

Closed hl0737 closed 2 months ago

hl0737 commented 2 months ago

ReadMe和Commit中均未看见版本更新说明，是更新了数据集嘛？

以及，安装完VlmEval后，在vlmeval.utils目录下没有TSVDataset，导致import error

kennymckormick commented 2 months ago

Hi, @hl0737 抱歉，在我们改版 VLMEvalKit 后还未对本 repo 中的 instruction 进行更新，我们将完成更新后通知您

kennymckormick commented 2 months ago

Hi, @hl0737 我们已经更新了相关 instruction。v1.1 相比 v1.0 进行了数据的删减与增补，可以对比我们 arxiv 论文的 v3 与 v4