Closed Heath123 closed 2 years ago
Hey guys,
I think another good option would be to also host the model(s) on Hugging Face model hub.
They also provide huggingface_hub
library that can be used as a nice client to get the model download integrated into magma.
We have been using this in Flair library and also hosting some of our models on the model hub.
Yes, i hope this will end up soon in hugginface. We are also setting up hosting on our infrastructure to allow for more bandwidth/ quota. Sorry for the hick-ups.
Google Drive link is also rejecting due to too many people downloading. Happy to setup a file server if we collect some VM & traffic money to a mug.
Diese Datei kann zurzeit nicht angezeigt oder heruntergeladen werden.
Diese Datei wurde in letzter Zeit von zu vielen Nutzern angezeigt oder heruntergeladen. Versuchen Sie später noch einmal, auf die Datei zuzugreifen. Falls die Datei besonders groß ist oder viele Nutzer darauf zugreifen können, kann es bis zu 24 Stunden dauern, bis Sie sie anzeigen oder herunterladen können. Sollten Sie nach 24 Stunden immer noch keinen Zugriff haben, wenden Sie sich an Ihren Domainadministrator.
Google Drive link is also rejecting due to too many people downloading. Happy to setup a file server if we collect some VM & traffic money to a mug.
Diese Datei kann zurzeit nicht angezeigt oder heruntergeladen werden.
Diese Datei wurde in letzter Zeit von zu vielen Nutzern angezeigt oder heruntergeladen. Versuchen Sie später noch einmal, auf die Datei zuzugreifen. Falls die Datei besonders groß ist oder viele Nutzer darauf zugreifen können, kann es bis zu 24 Stunden dauern, bis Sie sie anzeigen oder herunterladen können. Sollten Sie nach 24 Stunden immer noch keinen Zugriff haben, wenden Sie sich an Ihren Domainadministrator.
I'm serving it on my VPS at http://95.111.249.143:9876/mp_rank_00_model_states.pt but it won't be up forever and also this is my cheap personal VPS so don't overload it too much please
Hey all, I'm Omar from HF :hugs:
We would love to support having your models in the Hub. One thing that you might find useful is that model cards have metadata that allow reporting things such as the dataset, metrics, tags, etc. This can help with discoverability, which would be much better than through Google Drive links.
The model could live within an organization for Aleph Alpha for additional visibility, and we have a lightweight Python library called huggingface_hub
that would allow users to download/cache the model locally. Would you be interested in this?
Adding the model is relatively simple, here are some instructions for it -> https://huggingface.co/docs/hub/adding-a-model. I actually have one copy here which we could transfer to your org and add a nice model card.
mp_rank_00_model_states.pt
ends up containing:causing:
Possibly related to https://github.com/wkentaro/gdown/issues/26