Spring Batch 구조를 어떻게 해야될까요?

Question

안녕하세요. 요건에 맞춰 Spring Batch 작성을 하려고 하는데 고민을 하는데 잘 안되서 질문 드립니다.제가 하려는건 DB에서 기준 정보를 읽어온다.1에서 읽어 드린 기준 정보값이 10개의 ROW 면 각각의 ROW의 KEY 값으로 DB를 조회 하여 Wirte 까지 처리한다.Taklet 으로 한방에 처리하면 쉽지만 Step 별로 나누어 처리할때 구조를 어떻게 짜야될지 모르겠네요. 조언좀 부탁드립니다.현재 처리하는 방식으로는 1.Job구성 2.Step1 ( Tasklet 으로 기준정보 DB 조회 - 조회 완료된 값을 공유)3.Step2 reader, processor , write 구조로 Step1에서 조회된 기준정보 List 을 받아 각 ROW의 KEY 로 DB조회 후 CHUNK 단위로 wirte 까지 수행예시 ) Step1 에서 읽어드려온 기준정보가 A,B,C,D,E 5건이면 Step2 에서는 A의 정보로 DB 를 조회 Wirte 까지 진행. 완료 후 다시 B로 조회하여 Wite 까지 진행 , 총 E까지 진행결론은 Step2를 기준정보만큼 계속 돌아야되는데 어떤 방식으로 접근해야 할까요?

초무쿤 · Answer

느낌상으로는 2중 loop 처럼 처리하시려고 하시는거 같은데..제일 간단한건reader(JOIN해서 조회) -> processor -> writer한방에 끝내시는게 맞을거 같습니다만꼭 뭔가 커스텀하게 처리하시려면 writer 쪽에서public ItemWriter<Item> dbItemWriter() { return items -> { for(Item item : items) { // inner loop or custom ???? (건수가 많으면 메모리 부족) for(ChildItem childItem : ChildItemService.getChildItems(item.getId())) { // ~~~~ } } }; } 뭐 이런식으로 하셔도 ...

상후 · Answer

Step1은 조회만 수행하고, 어떠한 처리도 하지 않는다면 Reader 쿼리에 1번 조건을 넣으면서 한 번에 수행하는 방법도 고민해볼 것 같습니다

Spring Batch 구조를 어떻게 해야될까요?

2개의 답변

기술 목록