본문 바로가기
Q&A해결2026년 6월 5일1분 읽기

K8s Pod가 OOMKilled인데 메모리는 한참 남아 보입니다 — cgroup v2

인
인프라초보
조회 582댓글 2

운영 중인 Pod가 하루에 몇 번씩 OOMKilled로 재시작됩니다. 그런데 Grafana로 보면 컨테이너 메모리 사용량이 limit의 60% 정도밖에 안 됩니다.

State:  Terminated
  Reason:   OOMKilled
  Exit Code:    137
resources:
  requests: { memory: "512Mi" }
  limits:   { memory: "2Gi" }

working set이 1.2Gi 정도라 2Gi 안에 충분한데 왜 OOM이 날까요? 노드 전체 메모리도 70% 수준입니다.

환경: Kubernetes 1.32, containerd, cgroup v2, JVM 앱(Spring Boot)

댓글 2

김김영삼5개월 전

모니터링의 "working set"과 커널이 OOM 판단에 쓰는 값이 다릅니다. cgroup v2에서 OOM은 memory.current(= 익명 메모리 + 일부 페이지 캐시 + 커널 메모리) 기준인데, 대시보드는 보통 working set만 보여줘서 "여유 있어 보이는데 죽는" 착시가 생깁니다.


확인 순서


# 죽기 직전 cgroup 실제 사용
cat /sys/fs/cgroup/.../memory.current
cat /sys/fs/cgroup/.../memory.max
# OOM 이벤트 카운트
cat /sys/fs/cgroup/.../memory.events # oom_kill 증가 확인
# 노드 dmesg
dmesg -T | grep -i "oom\|killed process"

JVM이면 거의 이 케이스 — 힙(-Xmx) 외에 메타스페이스·스레드 스택·다이렉트 버퍼·코드캐시가 컨테이너 메모리에 다 잡힙니다. 힙만 보고 limit를 잡으면 비힙이 한도를 넘겨 컨테이너 전체가 OOMKilled 됩니다.


# 컨테이너 인지 + 힙 비율 명시
-XX:MaxRAMPercentage=70.0 # limit의 70%만 힙
-XX:MaxMetaspaceSize=256m
-XX:MaxDirectMemorySize=256m

요약: ① limit 대비 힙을 70%로 묶고 ② 메타스페이스·다이렉트 버퍼 상한을 명시하세요. working set이 아니라 memory.current 추세로 알람을 거는 것도 권장합니다.

인인프라초보(guest)5개월 전
MaxRAMPercentage 70으로 내리고 MaxDirectMemorySize까지 잡으니 12시간째 OOM 없이 돌고 있습니다. memory.current로 보니 확실히 working set보다 300Mi 정도 높게 잡히네요. 감사합니다!
Ctrl+Enter로 등록