search

Naver-AI-Hackathon / AI-Speech

31 stars 5 forks source link

세션이 진행중에 kill이 되는 현상이 있습니다. #29

Open DShomin opened 4 years ago

DShomin commented 4 years ago

세션 진행중에 아래와 같은 애러코드가 발생하면서 세션이 종료가 되고있습니다. 어떤 문제 때문에 이런 애러코드가 나오는지 궁금합니다. image

nsml-admin commented 4 years ago

할당된 메모리보다 더많은 메모리를 요구할때 위와같은 에러가 발생하면서 oom으로 죽게됩니다.

메모리를 더 적게 사용하는방법으로 다시 실행해보시기 바랍니다.

감사합니다.

bluebrush commented 4 years ago

@DShomin 님, https://n-clair.github.io/ai-docs/_build/html/en_US/contents/web_interface/usage_of_resources.html 보시면, GPU, CPU, CPU-RAM 사용량을 확인하실 수 있습니다. 문제가 되는 부분은 CPU-RAM 부분으로 예상됩니다. 자원을 계속 할당만 하고, 반환하지 않는 구조여서 발생할 것으로 예상됩니다.