IOT 프로젝트에서 influxDB 말고 몽고DB 써도 되나요?

Question

몇년전에 아무것도 모르는 상태에서회사에서 아두이노로 IOT 펌웨어부터 서버까지 구축하라고 해서아무 설계없이 뚝딱뚝딱 게시판 만들듯이2년동안 nodejs &#43; express &#43; mysql &#43; 아두이노 펌웨어전부 구현해서 연동 동작 시키는 작업까지 끝마쳤습니다.데이터베이스를 보니...센서 데이터만 하루에 약 700만개 이상의 데이터가 쌓이더군요.그렇게 한달, 두달... 몇달 쌓이고 검색해서 csv추출하려고 보니...수초에서 수십초가 걸리는 상황이 발생해서일단 매월 마다 테이블이 새로 생성 되도록 하여 데이터를 나누어 저장하도록 업데이트 하였고그나마 성능이 좀 나아진것 처럼 보였는데...그렇게 몇년이 지나니까...테이블이 수백개가 생겨있어서 보기가 상당히 불편하더라구요... ( 원래 그런가 ;;)몇년이 지난 지금...또 다시 회사에서 스마트팜 프로젝트를 좀 더 크게 해보자고 하는데그동안 제가 배운건 nodejs react mysql 등인데...자꾸 데이터베이스에서 mysql 를 쓰는게 맞는가? 에 대한 의문이 들기시작해서검색을 해보니 대부분의 사람들이 IOT하려면 시계열 DB를 써야한다.라고 그냥 못을 박아놨네요.더 찾아보니 influxDB 로 구현한 예제는 많은데...회원관리, 일반 게시판등도 구현해야하는데... 그런예제는 안보이고...다시 배우는데 시간걸리고 귀찮은데...그냥 mysql 쓸까? 생각도 들고..보통 IOT 스마트팜 프로젝트 할때는 어떤 DB 를 주로 쓰나요?influxDB로도 게시판 구현이 가능한가요?저정도 부하면 그냥 몽고DB나 mysql 써도 될런지?

콩콩시 · Accepted Answer

아 제가 다니는 곳에서는 수집용 db는 몽고DB 입니다.1달에 대략 1~2천만정도 쌓이구요, 통계는 first, last, count 이정도 수준의 집계하는데(aggregate) 1초걸립니다.지금 대략 1억좀 안되게 쌓여 있습니다.얼마가 더 쌓일지는 모르겠습니다만 만족하고 있습니다.

콩콩시 · Answer

아뇨 인플럭스(influxDB) 로는 로그형식의 데이터만 넣으셔야 합니다.이거 관계형 데이터베이스나 비관계형 데이터베이스랑 접근하고 관리하는법이 아에 다르니까요..그래서 관리하는 어플리케이션에서는 2개의 데이터베이스를 물어야합니다.로그 데이터 보는 용도로 쓰는 DB 1개(인플럭스 또는 몽고DB),로그인, 사용자관리, 게시판관리 같은 관계형식의 데이터를 관리하는 DB 1개(maria, mssql, oracle 등) 이렇게요.릴레이션이 복잡하지 않다면 몽고DB로 전부 쭉 가셔도 좋을 것 같습니다.그리고 관계db에 저런 로그형식 데이터가 쌓이는건 저는 비추합니다.쌓는건 잘 되니까 문제 없지만 통계 안나옵니다..GROUP 걸면 아마 한두시간 걸릴수도 있겠네요. 로그를 쌓는 데이터베이스는 몽고DB나 인플럭스, 아스트릭스를 사용하는 것을 추천드립니다.

OKKY_OP2 · Answer

해당 게시물은 관리자에 의해 기술에서 기타로 이동 되었습니다.

Crystal Park · Answer

우리나라 시계열 DB 기업인 마크베이스 DB(Machbase) 도 한번 검색해 보세요. IIoT DB에 최적화된 DB입니다.초당 570만건 처리가 가능하다고 합니다.https://www.etnews.com/20221221000092최근에 개발자의 시간을 대폭 줄이는 통합형 오픈소스 시계열 데이터베이스 : Machbase Neo (github.com/machbase)도 새롭게 오픈했다고 합니다.

IOT 프로젝트에서 influxDB 말고 몽고DB 써도 되나요?

4개의 답변

#iot 목록