뉴스데이터 캐싱 적용

Question

현재 클라이언트에서 검색하고자 하는 뉴스 제목을 담아 요청을 보내면, 서버는 해당 제목을 가지고 open api를 호출하여 뉴스 데이터를 받아오고, 클라이언트에게 응답해주고 있는 형태로 구현되어 있습니다.이 부분에서 다음과 같이 redis 캐싱을 적용해보고자 합니다.클라이언트가 보낸 요청을 토대로 redis 캐시 저장소와 캐시 체크를 진행합니다.캐시 히트일 경우, redis 저장소의 데이터를 응답내려줍니다.캐시 미스일 경우, open api를 호출하여 새로운 데이터를 클라이언트에 내려주고, 해당 데이터를 redis에 저장합니다.질문이 2가지 있습니다.뉴스 데이터의 특성상 실시간성이 중요하기 때문에, 캐싱 처리가 부적합하다고 생각이 들긴 합니다만, 매 요청마다 open api를 호출하는 것은 서버 부하를 높일 거라 생각합니다. 과연 뉴스 데이터에 캐시를 적용하는 것 괜찮을까요? 캐시를 적용해야 하는 이유가 있다면 부가적으로 뭐가 더 있을까요?아직 캐싱에 관해 깊이 있는 지식이 부족합니다. 제가 언급한 캐싱 전략에서 어떤 부분을 추가, 수정, 혹은 더 나은 방법으로 개선할 수 있는 방법이 있다면 추천해주시면 감사하겠습니다! (예를 들어, 5분 정도마다 주기적으로 open api를 호출해서 redis에 저장해놓고 클라이언트에 응답해준다. 등등 맞는지 모르겠습니다만..)

킁킁탐정 · Accepted Answer

API 서버에 부하가 가지만 그건 API 서버가 할일이고 내부적으로 rate limit이라던가 자체 caching을 할꺼라 예상됩니다. 그러므로 API를 사용하는 개발자 입장에서 이러한 제한 사항이 없다면 크게 신경 쓰지 않아도됩니다.뉴스 검색 데이터가 변경되었는지 검사할 방법을 API가 제공해주면 좋지만 아니라면 캐싱은 큰 의미를 갖기 힘듭니다. 어느정도 사용자가 많이 접속하고 실질적으로 엔드유저가 사용하는 웹브라우저에서 접속 속도등에 영향이 가지 않는다면 장점이 없습니다.캐싱을 한다고 가정하면 5분마다 검색 히스토리를 모두 API 서버에 요청하는건 잘못 하면 DDOS 공격이 될 수 있습니다. 그러므로 redis에서 제공하는 ttl 을 이용하여 데이터가 시간이 지나면 사라지도록 하고 없을 경우면 새로 등록하는 방식으로 하시면됩니다.

Clickin · Answer

이런 경우는 nextjs가 채택한 SSG 방식도 괜찮지 않을까요캐싱이 가능하다면 정적 HTML로 만들 수 있을 법 합니다.nginx 같은 별도의 웹서버가 필요하긴 하겠지만 이 부분은 크게 문제없으리라 보고요애초에 뉴스의 실시간성은 포털급 규모가 아니라면 몇 분정도 차이나도 사용자 입장에서는 느끼지 못할 듯 합니다.

집킨 · Answer

open api의 결과를 사용하면 어쨋든 결과적 일관성 구조가 만들어집니다어느정도의 간극을 허용할지 먼저 정해야죠open api에 설정된 처리율 제한도 고려해야하구요아키텍처 문제는 항상 트레이드 오프와의 전쟁이기 때문에 좀 더 자세한 요구사항을 말씀해주시는게 답변을 얻기가 편할겁니다

뉴스데이터 캐싱 적용

3개의 답변

#cache 목록