请问离线环境下怎么使用M2-Encoder

alipay / Ant-Multi-Modal-Framework

Research Code for Multimodal-Cognition Team in Ant Group

Creative Commons Attribution 4.0 International

60 stars 2 forks source link

请问离线环境下怎么使用M2-Encoder #18

Open zlw1113 opened 1 week ago

zlw1113 commented 1 week ago

你好，我在离线环境下运行run.py，报了以下错，我的理解是原代码需要网络环境将指定包下到对应位置想知道离线环境下要怎么下载对应包来避免下面的错误，另外想请教下M2-Encoder是否支持类似Chinese-CLIP的跨模态检索功能，可以对COCO-CN与Flicker-CN进行测试评估其recall，感谢~

airainday commented 1 day ago

解决了吗，我也想知道怎么离线运行

airainday commented 1 day ago

解决了，先下载模型，比如https://www.modelscope.cn/models/M2Cognition/M2_Encoder_Large/resolve/master/m2_encoder_1B.ckpt，这个1B的模型，然后在项目根目录的configs中找到Encoder_1B.json里面加上“model_url”:"m2_encoder_1B.ckpt"，把下载的m2_encoder_1B.ckpt放在~/.cache/m2_encoder文件夹下面就行了。

zlw1113 commented 1 day ago

可以的，问题可以解决~