search

OpenGVLab / InternVideo

[ECCV2024] Video Foundation Models & Data for Multimodal Understanding
Apache License 2.0
1.44k stars 88 forks source link

videochat2 with internvideo #183

Open yepzhang opened 2 months ago

yepzhang commented 2 months ago

你好，请问如何运行internvideo2+videochat2的模型？ 在下载了internvideo2_s3之后，我应该下载videochat2的哪些权重呢，他们的仓库只发布了umt编码的权重。 非常感谢！

shepnerd commented 2 months ago

你可以参考我们huggingface的实现来使用，更方便：internvideo2-chat-hd, internvideo2-chat.

yepzhang commented 2 months ago

非常感谢～请问如果要继续做finetune的话是参考videochat2的脚本实现吗？谢谢！

yepzhang commented 2 months ago

另外你们有计划发布16frame的版本吗