쿠버네티스 calico CNI Pod 통신 안됨.

Question

현재 쿠버네티스 환경으로 서비스를 배포하기 위해 네이버 클라우드에서 3개의 서버를 사용하고 있습니다. 서버 구성 환경은 네이버 클라우드를 사용중에 있습니다. CNI로는 calico IPIP모드 사용중에 있고, pod-cidr는 &#34;10.100.0.0/16&#34;로 사용하고 있습니다. 현재 핵심 파드들은 정상적으로 돌아가고 있는걸로 보입니다. 현재 테스트를 위해 2개의 노드에 각각 두개의 pod들을 띄워 테스트 중인데,worker1 - (nginx2, nginx4) worker2 - (nginx1, nginx3) 같은 node의 pod 끼리(nginx2-nginx4), (nginx1, nginx3)는 통신이 잘 되지만, 다른 노드로 통신을 하니 통신이 되질 않습니다. 같은 노드 pod으로 통신 (worker2.nginx1 -> worker2.nginx3) 다른 노드 pod으로 통신 (worker2.nginx1 -> worker1.nginx2)worker2 노드 eth0 인터페이스에서 tcpdump를 떠서 확인해보니 나가는 IPIP 패킷은 확인이 되는데, worker1 노드에서 tcpdump를 떠서 확인하면, 패킷이 들어오지 않습니다. worker2 노드의 eth0 인터페이스 tcpdump 결과어떤 설정을 해줘야 노드간 통신이 이루어 질까요??

김재현 · Accepted Answer

이게 서비스를 사용할때 간헐적으로 통신이 안되는 경우가 있더라고요.그래서 서비스에 연결된 파드들과 해당 파드가 있는 노드들을 디버깅 해보니 위에서 설명한 다른 노드일때만 통신이 안되는 문제를 찾았었습니다.그래서 이래저래 트러블슈팅을 해보다 보니 다른 노드일때 통신이 안된다는점을 찾게되서 pod간 직접 통신 테스트를 진행하던 중이였습니다. &#43;&#43;이유는 찾았습니다. calico 에서 사용하는 IPIP터널링이 문제였습니다. 네이버 측에 문의해보니 IP 프로토콜은 네이버 클라우드에서 허용하는 프로토콜이 아니다 보니 패킷이 제대로 전달이 안되던 거였습니다.calico 모드를 vxlan모드로 바꿔서 하니 잘 되는걸 확인했습니다.혹시 같은 이유로 고생하시는 분들은 이글보고 참고하시길 바랍니다!

테스트맨 · Answer

macVlan

worker ant · Answer

svc를 사용하지 않고 굳이 pod간 직접 연결을 하시려는 이유가 있나요?

쿠버네티스 calico CNI Pod 통신 안됨.

3개의 답변

#cni 목록