[k8s] drain, cordon, uncordon 개념 및 사용법

쿠버네티스를 사용하다보면 불안정한 워커 노드에 대해서 점검하거나 교체해야할 경우가 생긴다.
이때 특정 노드에 pod가 스케줄링되지 않도록 설정하거나 pod들을 다른 곳으로 옮길 필요가 있다.

이때 사용 가능한 kubectl 명령어가 cordon, drain 이다.

 

 

 

[cordon]

cordon은 특정 노드에 pod가 스케쥴링되지 않도록 설정한다.

 

노드 확인

kubectl --kubeconfig $KUBE_CONFIG get nodes

 

cordon

kubectl cordon $NODENAME

cordon을 실행한 노드는 status가 ready에서 ready,SchedulingDisabled로 변경되며, pod가 더이상 스케쥴링되지 않는다.

 

uncordon

kubectl uncordon $NODENAME

 uncordon을 실행한 노드는 status가 다시 ready 상태로 변경되어 pod가 다시 스케쥴링 된다.

 

 

[drain]

작업 대상 노드의 pod를 안전하게 축출하여 해당 pod내의 컨테이너들을 Graceful termination 형태로 종료 가능하다.

 

노드 확인

kubectl --kubeconfig $KUBE_CONFIG get nodes

 

작업 대상 노드의 Pod 축출

kubectl --kubeconfig $KUBE_CONFIG drain $NODENAME

해당 노드에 있는 pod 들은 terminating 되거나 pending 된다. 

-노드가 한대인 경우
terminating 상태인 pod들은 아직 완전히 종료되지 않은 상태를 가르키며, 노드가 SchedulingDisabled상태이기 때문에
pod들은 스케쥴링되지 못하고 pending 상태가 된다.

-노드가 여러대인 경우
노드가 여러개라면 pod들은 다른 노드로 이동되어 스케쥴링 된다.

 

작업 이후 해당 노드에 다시 pod가 스케줄링 되도록 설치

kubectl --kubeconfig $KUBE_CONFIG uncordon $NODENAME

해당 노드의 작업이 완료되었다면 마찬가지로 uncordon 을 수행하면 해당 노드가 다시 ready 상태로 변경된다.