OKKY
커뮤니티
Q&A
지식
이벤트
Contact
부트캠프
Jobs
Search Bar
로그인
회원가입
elk
전체
최신순
질문하기
답변
5
동도인
·
3개월
589
0
답변 5
ELK 시스템 구성시 Kafka 사용 질문
현 회사 시스템은 대략 위 처럼 구성이 되어 있습니다. 4개의 WAS 서버에서는 각각의 파일비츠가 설치가 되어 있고 이 파일 비츠들은 Active 된 로그스테시로 로그파일을 전송합니다. 로그 스테시는 이렇게 수집된 로그 를 키바나에 전송하여 모니터링 시스템을 시각화 하고 있습니다. 근데 중간에 파일비츠에서 수집되는 로그 파일을 바로 로그스테시로 보내는게 아닌 중간에 kafka 를 끼워넣어 구성하는 방법도 있더라구요. 아니면 kafka 가 로그를
답변
0
python치드
·
1년 이상
231
0
답변 0
elk로 제작한 앱도 gs인증을 받을수있나요?
안녕하세요. elk를 기반으로 데이터를 분석하는 보안관련 서비스를 만들고 있습니다. elk 스택으로 데이터를 수집하면, 사전 제작된 쿼리와 대시보드를 통해 공격여부를 알려주는 분석서비스입니다. 별도의 백엔드와 프론트엔드 개발없이 elk스택을 그대로 활용해서 개발을 하는데요, 고객이 gs 인증이 가능한지를 문의하는 상황입니다. 이런 형태의 서비스도 gs인증이 가능할까요? 경험이 있으신분이 계시면 도움을 부탁드리겠습니다. 감사합니다.
답변
0
낫어펑션
·
1년 이상
456
0
답변 0
CS 데이터(카카오톡 채널 대화) 구조화 작업 아이디어
답변
1
계란찌미
·
약 2년
507
0
답변 1
로그데이터분석에서 프로메테우스 VS ELK
현재 반도체공장 관련 로그데이터를 통해 분석시스템을 만드는 프로젝트를 진행중입니다. 로그데이터는 직접 시뮬레이션 툴을 통해 만들었는데요, 각 이송체ID, 속도, 상태코드, 에러코드, 현재위치(node명), 목표노드 등 다양한 데이터를 저장합니다. 결론적으로 1시간 10만개의 데이터가 생길정도로 거대한 로그데이터를 통해 통계를 내야하는데, 이 과정에서 기술선정 관련한 고민이 있습니다. 로그데이터 = 시계열데이터이므로 이에 특화된 프로메테우스를
답변
2
마소팟
·
약 2년
426
0
답변 2
윈도우 10 공격
안녕하세요 <프로젝트 개요> ELB 를 사용해서 윈도우 R2로 묶여있는 사용자(윈도우10)에 공격 했을 때 그 공격기법에 따라 AV를 개발하여 최종적으로 디스코드 같은 메신저로 사용자에게 이러이러한 공격이 들어왔다는 알림을 주려는 프로젝트를 계획 중 입니다. <궁금한점> 제가 맡은 부분이 사용자(윈도우10)을 공격하는 공격기법을 정해서 공격을 해야하는데 어떠한 공격기법을 사용해야 좋을지 많이 찾아도 보고 했는데 악성메일(피싱)
답변
3
vedjh
·
2년 이상
490
0
답변 3
ELK 키바나..? 로 모든 로그수집이 가능한가요?
평소에 푸티로 SSH 붙어서 실시간성으로 로그를 봤는데.. 키바나로 하려니까.. 적응이 안되서 어렵네요;; 키바나로 푸티처럼 실시간로그를 수집할수있는건가요
답변
3
작심삼일
·
2년 이상
502
0
답변 3
elasticSearch vs Cassandra , 이미지/동영상 저장할 때
안녕하세요. 최근들어 NoSQL를 이것저것 접하고 있습니다. NoSQL 초보로써 질문드립니다. 이미지/동영상을 Base64 변환해서 저장할 때, ELK vs Cassandra 중 어떤 DB가 효율적일까요? Cassandra는 어떤 경우에 일반적으로 사용되나요?
답변
0
pppp9
·
거의 3년
366
1
답변 0
hadoop과 ELK stack 중 어떤 기술 스택을 사용해야할까요?
매 10분 단위로 뉴스 데이터를 크롤링해서 저장 후 데이터를 앞 단에 보여주는 프로젝트를 진행하려고 합니다. 이 상황에서 어떤 기술 스택을 사용해야할 지에 대한 고민이 있습니다. Hadoop Echo System 사용 Kafka + ELK stack 사용 뉴스 데이터의 키워드를 나누어 Count 계산을 해야하니까, 1번을 생각해보았고 10분마다 발생하는 데이터이니 데이터 파이프라인을 구축해야하지 않을까 싶어서, 2번을 생각해보았습니다.
답변
3
Clickin
·
약 3년
313
0
답변 3
파일 로그 수집 및 메트릭 추천해주실 분
여러분들은 혹시 파일 로그를 수집한다고 하면 어떤 방식으로 수집하시나요? 사내에 원래 있던 로그 조회 시스템이 있는데 얘는 로그 파일을 실시간으로 파싱해서 읽다보니까 조금만 조회범위가 커지면 서블릿이 아에 뻗어버리는 문제가 있는지라 대안을 찾고있습니다. logback에서 바로 RDB에 올리는 방안도 생각해봤지만 찾아보니 부하가 너무 많이 걸리는 방식인 듯하여 포기했고요 현재는 filebeat에 ELK 스택으로 하나 테스트 해봤더니 생각보다 검색이 쉽
해결
1
beginnerLee
·
4년 이상
511
0
해결 1
elasticsearch의 index내 doc에서 검색
안녕하세요. elasticsearch 공부 중 잘 안 되는 부분이 있어서 올려봅니다.elasticsearch 내에서 한 index에 여러 doc이 있는 구조입니다.학교로 예를 들면, index는 학교 doc은 1학년 1반 ... 3학년 n반이 될 것 같네요.여기서 1학년 1반이라는 doc에서 국어 성적이 50점 이상인 학생을 조회하는 것이 필요하다고 가정하면 어떻게 해야할까요? 단순히 i
답변
1
워니김
·
약 5년
798
0
답변 1
ELK스택 사용하면서 logback과 filebeat사용 여부에 대해 궁금합니다
ELK스택을 사용하려고 하는데요환경이 AWS에서 오토스케일링 하면서 데이터 손실될 가능성이 있기도 하고엘라스틱서치가 죽어버릴 염려가 되어 kafka를 사용하려고 합니다.근데 kafka에 로그를 보낼때 logback으로 보내는것과 filebeat로 보내는것 어떤게 더 나을지 몰라서질문 올립니다. filebea
답변
2
범계쟁이
·
5년 이상
806
0
답변 2
elk 병목현상에 대해서 질문드립니다.
현재 로그 수집을 위해 ELK를 이용하고 있는데요filebeat, kafka, logstash -> elastic service 를 활용중입니다.문제는 처리할 로그 양이 많아지니 병목현상이 일어난다는것인데요.kafka에 많이 쌓여있어서, logstash가 사양이 문제인지 elastic service 사양이 문제인지 고민중입니다.
답변
0
hyeyh
·
5년 이상
616
0
답변 0
Logstash conf파일 filter grok에 관한 질문입니다.
(사진이 안보일시)match =>[ "message", "\<%{NUMBER}\>%{TIMESTAMP_ISO8601:logtime} %{DATA:system}:%{SPACE}prefix=%{DATA
답변
0
왕십리역
·
거의 7년
1.2k
0
답변 0
Elasticsearch 'date' type 조회방법
Elasticsearch 'date' type 조회를 어떻게 해야할지 모르겠습니다...PUT sample/_doc/1{ "settings": { "number_of_shards": 5, "number_of_replicas": 1 },
답변
2
늦깍이이직생
·
거의 7년
2.0k
1
답변 2
입사1주일차신입]Spring-data-Elasticsearch 질문드립니다.
안녕하세요. 입사 전 ELK관련 질문 했었던 신입개발자입니다. 벌써 입사 후 1주일이 지났습니다. 입사 전 공부하고 간 것이 많은 도움이 되어 입사 1주차는 굉장히 잘 보냈습니다. 입사 첫 날 오전 검색엔진에 대한 기본적인 개념/정의를 교육받고 오후 알고리즘 및 기초 개념 강의, 2일차 오전 알고리즘 및 기초 개념 강의 후 2일차 오후부터 원격DB 정보와 그림으로 그려진 레이아웃을 받아 책 정보 관련 간단한
답변
4
늦깍이이직생
·
거의 7년
3.8k
0
답변 4
다음 주 첫 출근하는 신입개발자입니다. --엘라스틱서치--
안녕하세요 .엘라스틱서치 관련 문의드립니다. 질문 전 간단히 제 개발수준을 말씀드리고 질문을 드려야 보다 정확한 답변을 받을 수 있을 것이라 생각되어 말씀드립니다.전 30살 고졸로 늦은 나이에 개발자라는 직종을 결심하여 이직 후 국비
답변
2
늦깍이이직생
·
거의 7년
1.3k
0
답변 2
엘라스틱서치 관련 문의 드립니다
안녕하세요 .엘라스틱서치 관련 문의드립니다. 질문 전 간단히 제 개발수준을 말씀드리고 질문을 드려야 보다 정확한 답변을 받을 수 있을 것이라 생각되어 말씀드립니다.전 30살 고졸로 늦은 나이에 개발자라는 직종을 결심하여 이직 후 국비
답변
2
fsaas
·
거의 9년
1.6k
0
답변 2
[초보]ubuntu server에서 kibana를 돌렸는데 외부에서 접속하는 건 불가능한가요 .. ?
안녕하세요. 이번에 elk 스택에 대하여 공부하고 있습니다. Command line에 익숙해질겸 Vmware에서 ubuntu server용 배포판으로 돌리고 있는데, 문제는 kibana는 웹인터페이스? 라서 브라우저가 없는 ubuntu에서는 접속을 할 수 없습니다. 만약 브라우저가 있다면 localhost:5601으로 접속할 수 있다고 하더군요. 제가 지금 바보같은 말을 하는 걸 수도 있는데 외부 컴퓨터에서 kibana가 실행중인 서버
Search Bar
