API 호출해서 데이터 쌓는 일배치 개발시, 기존 데이터 처리는 어떻게 하나요?

Question

안녕하세요~ 외부사이트 API 호출해서 내부 DB 에 데이터를 쌓는 일배치를 개발하고자 합니다. 일배치는 하루에 한번 돌아서, 도는 시점 기준 업데이트 날짜를 확인하여 하루 이내에 변경사항이 있는 데이터만 수정을 하도록 계획중입니다.이럴 경우, 기존에 등록 되어있는 외부사이트 데이터들은, 일배치와 별개로 최초 배치 도는 시점에 모두 받아오도록 개발을 해야하나요?아니면 기존 데이터는 개발계에 수동으로 작업하고 추후 스테이지나 운영계로 마이그레이션을 하는게 나은가요? 배치 개발은 처음이라.. 많은 조언 부탁드립니다~

라이칸 · Answer

배치 돌리시는 외부데이터가 어느정도 변경 주기가 있는지에 따라서 달라질거같은데요…외부 데이터라고만하시면..그리고 하루에 외부데이터게서 받는 양이 어느정도인지도 알아야 할거같네요..

API 호출해서 데이터 쌓는 일배치 개발시, 기존 데이터 처리는 어떻게 하나요?

1개의 답변

Q&A 목록