k8s health-check 구성 관련하여 질문 올립니다.

Question

안녕하세요. k8s health-check 구성 관련하여 질문 드립니다.현재 WAS pod는 아래처럼 구성이 되어 있습니다.(편의상 Replica 수는 1이라고 하겠습니다)POD 안의 프로세스는 nginx가 프록시 형태로 존재하고, apache가 was로 동작하는 형태입니다(실제 구조와는 약간 다르지만, 간략히 하자면 그렇습니다). 여기서 k8s에서 readiness, liveness probe를 설정해 둔 상태입니다. (각각 period seconds : 10, failure threshold : 3)문제가 되는 상황은, db slow query등으로 요청의 응답이 오기까지 60초 이상이 걸리는 케이스가, 분당 150개 이상 오는 경우입니다. 이 경우 apache의 max-connection 기본 값인 150개를 꽉 채우고 있는 경우, 60초 이상 걸리는 요청이 완료되기 전까지는 추가 요청을 할 수 없는 상태입니다. 이때 readiness, liveness probe 요청 역시 불가하며, 실패로 간주되어 pod가 재시작되어져 버리는 현상이 발생했습니다.이런 환경에서, k8s pod내에서 apache의 health check를 현재 들어오는 트래픽에 관계 없이 수행하려면, 어떤 방법이 있을까요??시도해 본 방법httpGet 이 아닌 exec 방식으로 probe를 변경하여 프로세스를 체크하는 방식으로 변경했으나, traffic이 많아지는 환경에서는 pod의 exec 실행마저 느려져 timeout 발생period seconds, timeout 등 probe 설정 값을 조절하면 어느 정도 해소 가능하나, 트래픽이 과도하게 많아지면 동일한 이슈 발생max-connection 등 nginx, apache 등의 설정은 내부 사정상 조정 불가

k8s health-check 구성 관련하여 질문 올립니다.

0개의 답변

Q&A 목록