search

open-compass / VLMEvalKit

Open-source evaluation toolkit of large vision-language models (LVLMs), support 160+ VLMs, 50+ benchmarks
https://huggingface.co/spaces/opencompass/open_vlm_leaderboard
Apache License 2.0
1.34k stars 188 forks source link

无法评测llava1.5-7b #505

Closed itsqyh closed 1 week ago

itsqyh commented 1 month ago

transformers 版本是 4.37， 下载llava1.5-7b权重至本地后vlmeval/config.py 中llava-v1.5-7b的模型地址也做了修改，第一次run会正常下载数据集，但没有正常运行，也没有报错，直接结束了，请问有什么解决方法吗？ image 1844546e868c9c73ce1b5caa25167ee

FangXinyu-0913 commented 1 month ago

您好！可能是您没有正确安装llava所引起下列报错导致退出，您可以安装后再次进行尝试。 image

yingyingxia666 commented 1 month ago

微信图片_20241014101911 我加载模型的时候很慢很慢 并且运行报错是为什么呀

FangXinyu-0913 commented 4 weeks ago

这个提示是正常的，您加载完模型推理过程中，有出现其他报错吗 image

kennymckormick commented 1 week ago

Feel free to re-open this issue for any further need.