많은 서비스들의 로그를 수집하기에 적합한 기술이 뭐가 있을까요?

Question

다량의 외부 서비스와 API 로 연동된 상황에서,외부 서비스에서 제공하는 audit log api 를 이용해서 타 서비스의 audit log 를 수집해서 데이터를 활용하고싶은데요.단순하게 api call 해서 받은 응답을 db 에 저장하게되면,너무 많은 데이터 수집으로 인해 성능이나 비용에 여러 문제가 발생할 것 같은데..어떤 아키텍처를 적용하면 이걸 효율적으로 수집하고, 활용할 수 있을까요?

kenu,전독시 · Answer

돈이 조금 많이 들지만, DataDog 많이 씁니다.image from: https://en.wikipedia.org/wiki/Datadog트래픽이 많으면 매출도 많겠지요.

손님 · Answer

흔히들 ELK(Elasticsearch Logstash Kibana)나 EFK(Elasticsearch Fluentd Kibana)를 많이 씁니다

많은 서비스들의 로그를 수집하기에 적합한 기술이 뭐가 있을까요?

2개의 답변

Q&A 목록