EKS 1.32 + Karpenter v1.5에서 Spot 인스턴스 disruption이 너무 잦습니다

Question

EKS 1.32 + Karpenter v1.5로 운영 중입니다. Spot 인스턴스를 적극 활용하고 있는데 인스턴스 회수(disruption)가 너무 자주 일어나서 일부 batch job이 30분도 못 살아남습니다.

Karpenter v1.5의 disruption budget 설정을 어떻게 잡아야 batch job 안정성을 유지할 수 있을까요? 단순히 on-demand로 다 바꾸기는 비용이 부담입니다.

김영삼 · Accepted Answer

Karpenter v1.5에서 disruption 모델이 정리되었지만, 기본값이 비용 최적화 우선이라 batch 워크로드 입장에서는 공격적입니다. 핵심은 워크로드 종류별로 NodePool을 분리하는 것입니다.1) 워크로드 분리 — NodePool 두 개 운영--- # Spot — stateless web/api 전용
apiVersion: karpenter.sh/v1
kind: NodePool
metadata:
  name: spot-stateless
spec:
  template:
    spec:
      requirements:
        - key: karpenter.sh/capacity-type
          operator: In
          values: ["spot"]
        - key: kubernetes.io/arch
          operator: In
          values: ["amd64"]
      taints:

댓글 0