spring batch chuck 기반 질문

Question

spring batch에서 chuck 기반으로 ItemReader->CompositeItemProcessor(ItemProcessor 2개)->ItemWriter로 구성했습니다.chuck_size &#61; 5로 했을 때, ItemReader에서 10개를 읽어오면 processor1로 row 1개가 처리되고 processor2로 가서 처리되는데processor1에서 5개가 처리된 후에 processor2로 넘기는 방법이 있을까요?대략 구현하려는 것이 processor1에서 ItemReader에서 chuck만큼 읽은 것의 id를 모아서 processor2에서 쿼리 한번으로 읽어오려합니다

킹포링 (INTP) · Accepted Answer

Spring Batch에서 CompositeItemProcessor를 사용하는 경우, ItemProcessor 리스트 내부에서 지정한 순서대로 처리가 이루어집니다. 즉, 첫 번째 ItemProcessor가 전체 chuck_size의 아이템을 처리한 이후에 두 번째 ItemProcessor에 전달되는 구조입니다.따라서, processor1에서 5개가 처리된 후 processor2에 넘기는 방법은 CompositeItemProcessor에서 지정한 순서를 바꾸는 것이 아니라, processor1에서 처리된 결과를 모아두었다가 processor2에서 처리하는 방식으로 구현할 수 있습니다.processor1에서 ItemProcessor의 출력 타입을 List 형태로 변경하고, processor2에서 입력 타입을 List로 변경한 후, processor1에서 처리한 5개의 아이템을 모아두었다가 processor2에서 한번에 처리하는 방식으로 구현하면 됩니다. 이렇게 하면 processor1에서 처리된 결과를 모아두기 위한 메모리 사용량이 증가할 수 있으므로, 메모리 사용량이 문제가 되지 않는지 확인해야 합니다.

spring batch chuck 기반 질문

1개의 답변

Q&A 목록