GunSik2 / k8s-ai

ai/bigdata/gpu examples with k8s
0 stars 0 forks source link

k8s oom #47

Closed GunSik2 closed 3 years ago

GunSik2 commented 3 years ago

모니터링시 메모리 사용량은 실질 메모리 사용량을 수집하여 보여줌 리눅스 서버에서 free -h 실행했을때 free 값이 명목 사용량 available이 실질 사용량 oom killer는 명목 사용량 기준으로 호스트 메모리 부족시 동작

                    total        used        free      shared  buff/cache   available
Mem:           7.6G        2.0G        3.3G        8.7M        2.3G        5.4G
Swap:          3.0G          0B        3.0G

oom 방지를 위한 메모리 캐시 드랍

[root@inception ~]# cat /etc/cron.hourly/drop_cache.sh
#!/bin/sh
echo "3" > /proc/sys/vm/drop_caches