Closed wangfudong65 closed 1 year ago
检查一下bitsandbytes版本 你的问题可以参考这里:https://github.com/Facico/Chinese-Vicuna/blob/master/docs/notes.md#oomout-of-memory%E7%88%86%E6%98%BE%E5%AD%98
我看看,感谢
我保存的时候也是显存爆炸了,重新建了个虚拟环境就正常了
检查一下bitsandbytes版本 你的问题可以参考这里:https://github.com/Facico/Chinese-Vicuna/blob/master/docs/notes.md#oomout-of-memory%E7%88%86%E6%98%BE%E5%AD%98