현재 돌아가는건 두개 세션 284, 286이고 4개의 GPU를 쓰고있는 환경에서
submit을 하기위해 해당 명령어를 입력했습니다.(available GPU = 5)
nsml submit CAU_LOVER/ir_ph2/286 8
그런데 다음과 같은 에러가 발생했습니다.
네트워크 오류라 생각하고 기다렸다가 다시 명령어를 입력해도
사용가능한 GPU량이 부족하다고 나옵니다.
확인 부탁드립니다.
.Error: Fail to run nsml session due to lack of available GPU for you
Your maximum available GPU is 5
Your are currently using 5 GPU
The number of GPU you requested is 1 GPU
time="2019/02/03 01:57:03.288" level=fatal msg="Internal server error"
현재 돌아가는건 두개 세션 284, 286이고 4개의 GPU를 쓰고있는 환경에서 submit을 하기위해 해당 명령어를 입력했습니다.(available GPU = 5) nsml submit CAU_LOVER/ir_ph2/286 8
그런데 다음과 같은 에러가 발생했습니다. 네트워크 오류라 생각하고 기다렸다가 다시 명령어를 입력해도 사용가능한 GPU량이 부족하다고 나옵니다. 확인 부탁드립니다.
.Error: Fail to run nsml session due to lack of available GPU for you Your maximum available GPU is 5 Your are currently using 5 GPU The number of GPU you requested is 1 GPU
time="2019/02/03 01:57:03.288" level=fatal msg="Internal server error"
2~3시간 정도 기다렸다가 재로그인하니 해결되었습니다.