카프카 컨슈머 파티션 할당

Question

안녕하세요스프링 &#43; 카프카를 사용해서 간단한 채팅을 만들어보는 중인데지금 토픽을 만들고 나서 바로 파티션 할당이 되지 않아 채팅 메시지를 받을 수 없는 상황입니다.컨슈머 콘솔로 토픽 메시지를 확인해보면 저장이 잘 되는데컨슈머 그룹에 새로 생성한 토픽은 보이지 않았습니다.이후 스프링 애플리케이션을 재시작하거나, 시간이 몇분 지나서 자동으로 리밸런싱이 이루어졌을 때파티션이 할당되었다는 로그가 나오고 그전까지 쌓인 메시지를 Kafka Listener에서 한번에 받게 되고이때부터는 메시지가 잘 받아집니다.토픽을 생성하고(채팅방 생성) 바로 파티션 할당이 되지 않는 이유가 뭘까요..?

냥길동 · Answer

혹시 토픽의 파티션수를 운영중에 늘리시거나 해서 그런건 아닐런지요? 이것저것 테스트해보니 운영중엔 늘리지 않는게 좋더라구요. (특히 데이터가 많으면 많을수록)

카프카 컨슈머 파티션 할당

1개의 답변

기술 목록