자바 리소스 사용량 관련하여 고수분들께 질문드립니다.

Question

안녕하십니까 현재 SI업체 소속으로 파견나와 배치개발 프로젝트에 투입된 1년미만 신입개발자입니다.현재 프로젝트에 대해 간단하게 설명드리자면 고객사에서 솔루션 프로그램을 통해 수행중인 배치작업을자바 스프링배치로 이관하여 수행하는 프로젝트인데요현재 사용중인 솔루션에서 ETL배치 진행 시 추출테이블의 데이터를 파일로 다운로드 -> 세션테이블 생성 및 세션테이블에 파일 데이터 업로드 -> 세션테이블에서 목적테이블로 DB to DB 데이터 적재위 3단계로 작업을 진행하고있는데 이걸 스프링배치로 옮긴다면제생각에는 세션테이블 관련단계를 건너뛰고 추출데이터를 변수에 담았다가 목적테이블에 업로드해주면 될것같은데상급자분께선 배치실행 서버요건이 여의치않아 자바에서 리소스를 많이 먹으면 안되기때문에 AS IS 와 동일하게 세션테이블을 통해서 진행하는방식으로 하라고 말씀하십니다.초급인 저의 시선에선 세션테이블을 사용하더라도 추출테이블에서 데이터를 가져올땐 동일하게 자바의 변수를 이용해야하고변수에 담긴 데이터를 세션테이블에 INSERT 하는거나 목적테이블에 INSERT 하는거나 소비되는 리소스는 동일한거 아닌가??하는생각이 드는데 이부분에 대해 시원하게 설명이 안되어서 너무 궁금합니다.혹시 두가지 방법에 리소스 소비량에 차이가 있는지, 있다면 어떤 요소때문에 차이가 발생하는건지 가르침을 주신다면 정말 감사할것같습니다.시간내어 긴 글 읽어주셔서 감사합니다.

초무쿤 · Answer

Step1. 파일 다운로드Step2. Reder(파일) Writer(테이블) chunk 단위로 처리하면 될거 같은데요. File to db 소스들 검색하면 많습니다. Chunk 단위로 처리되는거라(메모리는 chunk량 만큼만 필요)중간에 그룹핑을 하거나 하는 특별한 로직이 없다면 굳히 temp 테이블 거처갈 필요가 사실 없어요.

최은영 · Answer

리소스 문제는 아니지만 세션테이블? 임시테이블을 거쳐가는 비지니스 로직은 필요합니다.

자바 리소스 사용량 관련하여 고수분들께 질문드립니다.

2개의 답변

Q&A 목록