자바 Redis lettuce 커넥션에 대해

Question

모회사에서 중요 납부관련 서비스 스프링부트로 개발하는 사람입니다.레터스를 사용하고있는데 커넥션에대해 자문을구합니다.하나의 프로젝트에 5개 pod가 있구요.그 5개는 커넥션 한개를 같이 사용합니다.이러던 도중 redis failover가 발생하였고.... 새벽에 관제에서 연락이왔어요. 서비스 망가졌다고.보니까 pod 5개중 3개는 망가졌고. 2개는 레디스 연결이 잘 되고있더군요.제 예상으로는 페일오버 발생시 primary서버에서 secomdary로 전환되고 커넥션 아이디가 다시 생성이되고 그 새로운 커넥션 아이디로 통신이 돼야 하는데 3대는 그렇게 안된거같은데. 이쪽을 깊게 모르다보니 원인찾기가 힘듭니다.그리고 자동으로 리커넥팅이 되긴할텐데 왜3대만 뻑갔을까요.심지어 새벽1시에 약 15분간 장애가 났어요.command timeout에러가 발생한거보니 분명 레디스 연결은 된상태고 get set 호출할때 타임아웃이 난거 같은데. 타임아웃이 1분간 나고 재시도할때도 이전 커넥션을 바라보는 뭔가 멍청한 상황이 발생했는데 도무지 알수가 없네요.레디스 고수분들 자문을 구합니다.커넥션에 대해 어떻게 정확히 동작이 되는지 매커니즘이 이해가 안가네요.이런 사례가 정말 드문것같은데 미칠지경입니다.지금 풀을 사용을 안하고있어서 풀을 사용하려고 생성해놓고 여러 커넥션 쓰는걸로 바꾸고 timeout도 5초로 줄여놨습니다.근데 이래봤자 뭔가 이전 커넥션 그대로 계속 지금처럼 물고 있으면 무용지물일거 같은데..하...

apidevelop222 · Answer

우선 cluster 환경이라고 생각하고 말씀드리겠습니다. failover되면 primary대신 secondary가 primary로 승격하겠죠? 근데 그 승격한 secondary의 대한 ip, port 정보를 was서버가 어떻게 알까요? redis 서버에서 was서버로 알려줘야할까요? was 서버가 redis 서버에게 알려줘야할까요? 정답은 was서버가 알려줘야합니다. 이제 어떻게 was서버가 redis 서버의 승격한 primary node의 정보를 알아서 다시 connection 을 하는지 찾아보시고 설정해보세요

Dierslair · Answer

spring: config: activate: on-profile: - container data: redis: timeout: 3s lettuce: cluster: refresh: adaptive: true period: 5s cluster: nodes: - 172.30.1.54:6379 - 172.30.1.57:6379 - 172.30.1.61:6379 - 172.30.1.52:6379 - 172.30.1.65:6379 - 172.30.1.81:63793 마스터 + 3 슬레이브 구성이에요. 이렇게 해두고 잘 쓰고 있어요~ refresh 를 통해 능동적으로 connection 확인을 하고 있는지 확인해 보세요.

자바 Redis lettuce 커넥션에 대해

2개의 답변

기술 목록