자바 Spring Boot에서 로또 API 호출하여 번호 받아오는 방법 속도 개선 질문

Question

안녕하세요.로또에 관심이 많아서 로또 번호 추출 프로그램을 학습용으로 만들어보고 있는 직딩입니다.현재 서버단 개발을 진행하고 있는데요.https://www.dhlottery.co.kr/common.do?method&#61;getLottoNumber&drwNo&#61;1로또 API의 링크를 보니 위 링크에서 마지막 부분에 값만 회차번호를 넣어주면 Json형태로 정보를 제공해주고 있습니다.이것을 토대로 로또 당첨정보를 저장하는 DB를 만들고 스케줄러를 이용하여 매주 토요일 업데이트 되는 시간에 파싱하여 DB 저장을 하고 있는데요.한가지 문제가 처음 DB저장을 하게 되었을 때 1회차부터 최신회차까지 data를 받아와야 합니다. 현재 1000회수가 넘는 데이터를 받아오는데요이게 1회차씩 접속해서 받고 저장을 반복하다 보니 처음 데이터를 저장할 때 속도가 매우 느리더라구요 ㅠㅠ혹시 해당 API 호출하여 파싱하는데 속도 개선을 할 수 있는 방법이 있을까요?

consr · Accepted Answer

전체를 주는 api가 없다면 스레드를 늘려서 하는 방법이 있을 것 같네요...그런데 이미 db에 스케줄러로 매주 업데이트 해서 저장하고 있는거 아닌가요?

shintwl · Answer

저라면지금까지 나와있는 결과 json으로 다 다운 받는다 (자는 동안 돌려놓는다던가)다운 받아 놓은 json파일 파싱해서 db에 넣는 프로그램 돌린다이렇게 할 것 같습니다

준호 · Answer

인터넷에 로또 당첨 번호 리스트 검색하시면 1회차부터 최신 회차까지 나와 있는 데이터가 있습니다.해당 내용으로 초기 데이터 구축하시고 최근 데이터만 주 1회 갱신하시면 될 것으로 판단됩니다.

김을동 · Answer

1회성이니 고려하지 않아도 될 듯 한데

VB시카 · Answer

저라면 1번 방법 1개씩받은걸 바로 저장하지 말고 N개씩 모은 후 INSERT2번 방법 걍 1번작업을 수기로 한 후 SAM파일을 만든 후 필요할떄 마다 테이블 날리고 INSERT3번 멀티스레드로 다수건의 데이터를 동시에INSERT이런방법을 선택하겠습니다.

자바 Spring Boot에서 로또 API 호출하여 번호 받아오는 방법 속도 개선 질문

5개의 답변

Q&A 목록