search

hiyouga / ChatGLM-Efficient-Tuning

Fine-tuning ChatGLM-6B with PEFT | 基于 PEFT 的高效 ChatGLM 微调
Apache License 2.0
3.65k stars 471 forks source link

CUDA error: an illegal memory access was encountered #405

Closed suckseed5 closed 11 months ago

suckseed5 commented 1 year ago

有没有人遇到这个问题，同样的数据在A100-40G（cuda-11.4）上，一跑就报错： image

codemayq commented 1 year ago

请问有跑过其他程序吗，这个看着像是 CUDA本身的配置问题，可以先参考这个 做一些问题排查 https://saturncloud.io/blog/what-is-cuda-illegal-memory-access-error-and-how-to-fix-it-with-sufficient-memory/