AWS cloudfront 사용시 속도 추가 개선방향

Question

안녕하세요, 일단 현재 상황 간단히 설명드릴게요.한국 리전 S3에 업로드된 영상 파일들을 유럽, 동남아 등 여러 리전에서 직접 만든 앱으로 다운받아 사용해야 합니다.s3에는 몇십~몇백MB 되는 영상파일들 업로드되어 있고, Cloudfront 통해 CDN 설정하였습니다.그런데 외국 클라이언트 분들한테서 다운로드 속도가 너무 느리다고 클레임이 들어왔습니다.그쪽 리전에 EC2를 파서 파일 다운로드 테스트를 해보니, 첫번째 다운로드에 20.7초, 그 이후에는 1.1초대로 나오는 등, 제대로 cache hit가 되고 있는 것 같습니다.그래서 느리다고 하는 것이 혹시 S3 origin->cdn으로 올리는 첫번째 요청에 대해서만 그런건가 싶어서, 이를 해결하고 싶습니다(실제로 첫번째 요청만 느린건지, 그 이후고 느린건지는 질문을 드렸는데 답장이 안 왔습니다..)현재 시도한 방법으로는Cloudfront Origin Shield 설정TTL값 1년으로 설정S3 Transfer Acceleration 설정 (업로드 속도는 개선?, 다운로드는 영향 X)가 있습니다.추가적으로 다음과 같은 작업이 실제 영향을 주는지, 그렇다면 구체화하기 위해서 어떤 방식을 취해야 하는지가 궁금합니다.프로젝트 내부 API를 통한 S3로 파일 업로드 시, 주요 클라이언트들이 있는 리전에서 최초 1회에 한해서 미리 파일 다운로드 요청이를 통해 미리 CDN에 파일을 적재함으로써 추후 실제 필요에 의한 요청 시 다운로드 속도 개선혹은 아예 다른 좋은 방법들이 있는지, 조언 주시면 감사히 받겠습니다.

캐티 · Answer

cdn에 캐시가 히트되면 일정기간 서버에 남아요. TTL 은 브라우저거랑 cdn거랑 갈라지는 부분이 있쩌. 아래 거는 클라우드플레어 정의 화면이고 위에 얘기는 클라우드프론트 cdn에 TTL 설정이 맞는지 몰?루는거 아니나요.이렇게 하였다 하더라도 해당 지역 리전에 대하여 캐싱이 이루어지는 거여서 vpn이나 다른 지역에 서버에서 요청을 한번 치루어 주어야 하는 거여요. 예컨데 함수 어플리케이션에서 매번 6개월 마다 1회 크론잡을 실행하는 여지가 있쩌. 시스템에 설정이 직관적이지 아니하여서 석이 집나가겠어도 익숙해지면 좋을 거여요.

집킨 · Answer

아마 최초 다운로드 때 느린걸 말하는거겠죠지금 하신 작업들로 충분할건데더 좋은 방법은 미국리전 버킷만들어서 업로드하면 파일 복제하는 방법이 있겠죠대신 이러면 애플리케이션 복잡도가 좀 올라가긴 하겠죠..아니면 말씀하신대로 미국에서 GET을 자동으로 한번 해주거나요

정규분포 · Answer

원본 데이터가 담긴 S3 버킷의 리전이 어디입니까? 버킷이 한국에 있고 사용자는 북미거나 유럽이면 당연히 단순 CDN 적용으로는 해결 불가능한 문제고요. Origin Shield도 역시 비용과 라우팅 비효율, DDoS 공격 대비 차원에서만 고려해야 할 것이지, 이 문제의 해결책은 아님.https://docs.aws.amazon.com/AmazonCloudFront/latest/DeveloperGuide/DownloadDistS3AndCustomOrigins.htmlCDN 입혔다고 지연과 대역폭 문제가 마법같이 해결되는 것이 아닙니다. 해당 지역 CDN과 데이터 원본이 멀수록 어쩔 수 없어요. 증상을 보니 CDN은 제대로 동작하고 있는 듯.버킷 미러링 하셔야 합니다. 대부분 비용 문제 때문에 안하는 것이 대부분임. 스토리지 비용 + 국제 트래픽 비용 따지면 비용이 어마어마하게 드는 최적화입니다. 웬만한 대기업 아니고서야(유튜브 케시서버) 못해요. 하더라고, 이렇게 비싼 클라우드 서비스 사용 안하고 자체 운영하는 인프라 사용하죠.그냥 무시하고 사세요. 클라우드 써서 서비스해야 하는 작은 회사들은 해결하기 엄두조차 못내는 문제임.

AWS cloudfront 사용시 속도 추가 개선방향

3개의 답변

#cdn 목록