Jenkins 쿠버네티스 원격 배포 관련

Question

안녕하세요. 현재 샘플 스프링부트 프로젝트를 maven build -> docker image build -> dockerhub에 push -> push한 image를 k8s에 deploy 하는 테스트 환경을 구성하고 있는데, 쿠버네티스를 공부한지 얼마 안되서 구성에 어려움이 있어 도움을 구하고자 합니다.서버, 서비스, 포트포워드 상태입니다.서버IP서비스포트OS서버 01172.20.4.100jenkins13015우분투서버 02172.20.4.200windowsVM내부 IP서비스포트포트포워드master node192.168.0.100SSH22172.20.4.200:13220master node192.168.0.100Kubernetes6443172.20.4.200:13223worker node 01192.168.0.101SSH22172.20.4.200:13221worker node 02192.168.0.102SSH22172.20.4.200:13222서버 01에는 jenkins가 jenkins/jenkins:latest-jdk17 이미지를 사용하여 docker container로 실행되고 있습니다.서버 02는 Windows OS이고, virtualbox로 3개의 Ubuntu VM이 설치되어 있습니다. Ubuntu VM은 NAT Network로 구성되어 있습니다.아래는 jenkinsfile입니다.pipeline { agent any environment { repository &#61; 'abc/spring-test' // Docker Hub ID와 Repository 이름 DOCKERHUB_CREDENTIALS &#61; credentials('dockerhub-jenkins') // Jenkins에 등록한 Docker Hub credentials 이름 dockerImage &#61; '' kubeconfig &#61; '/home/config' // Kubernetes 구성 파일 경로 } tools { maven 'maven_jenkins' } stages { stage('Checkout') { steps { git 'https://github.com/abc/spring_test.git' } } stage('Maven 빌드') { steps { sh 'mvn -version' sh 'mvn clean install -DskipTests' } } stage('Docker Image 빌드') { steps { script { dockerImage &#61; docker.build repository &#43; &#34;:$BUILD_NUMBER&#34; } } } stage('Docker Hub 업로드') { steps { script { // Docker Hub 로그인 sh 'echo $DOCKERHUB_CREDENTIALS_PSW | docker login -u $DOCKERHUB_CREDENTIALS_USR --password-stdin' // Docker 이미지 푸시 sh 'docker push $repository:$BUILD_NUMBER' } } } stage('Docker 이미지 제거') { steps { script { sh &#34;docker rmi $repository:$BUILD_NUMBER&#34; // Docker 이미지 제거 } } } stage('Kubernetes 배포') { steps { script { sh ''' kubectl --kubeconfig&#61;$kubeconfig set image deployment/my-app-container my-app-container&#61;$repository:$BUILD_NUMBER kubectl --kubeconfig&#61;$kubeconfig rollout status deployment/my-app-container ''' } } } } }Jenkins에는 100번 호스트의 docker 소켓을 연결해두었고, kubernetes cli, kubernetes continuous deploy 플러그인 설치해놓은 상태입니다.Jenkins 컨테이너에는 kubectl만 설치되어 있는 상태라, 마스터 노드의 /root/.kube/config 파일을 복사하여,컨테이너의 jenkins유저가 접근 가능하도록 /home/config 에 붙여 넣었습니다.마스터 노드의 config 파일에는 서버 IP가 VM 내부 IP인 192.168.0.100으로 되어 있는데, 그냥 빌드하면 접근이 안되고 타임아웃이 뜹니다.&#43; kubectl --kubeconfig&#61;/home/config set image deployment/my-app-container my-app-container&#61;abc/spring-test:28 Unable to connect to the server: dial tcp 192.168.0.100:6443: i/o timeoutconfig에서 server정보를 접근가능한 172.20.4.200:13223으로 바꿔주면 아래와 같이 나오게 됩니다.&#43; kubectl --kubeconfig&#61;/home/config set image deployment/my-app-container my-app-container&#61;abc/spring-test:26 Unable to connect to the server: x509: certificate is valid for 10.96.0.1, 192.168.0.100, not 172.20.4.200접근이 아예 안되는 것인가 하여 curl로 찍어보면 403에러는 뜨지만 접근은 되는 것 같습니다.jenkins&#64;51595:/$ curl -k https://172.20.4.200:13223 { &#34;kind&#34;: &#34;Status&#34;, &#34;apiVersion&#34;: &#34;v1&#34;, &#34;metadata&#34;: {}, &#34;status&#34;: &#34;Failure&#34;, &#34;message&#34;: &#34;forbidden: User \&#34;system:anonymous\&#34; cannot get path \&#34;/\&#34;&#34;, &#34;reason&#34;: &#34;Forbidden&#34;, &#34;details&#34;: {}, &#34;code&#34;: 403 }27번이 172.20.4.200, 28번이 192.168.0.100으로 실행할 때 입니다.뭔가 거의 다 온 것 같은데, 여기서 막혀서 며칠 고생하고 있습니다...

Chan Young Kim · Answer

굿

Jenkins 쿠버네티스 원격 배포 관련

1개의 답변

기술 목록