DB insert 부분질문

Question

안녕하세요 DB에 Insert할때 질문입니다.LOG 테이블인데 현재 약 20만개정도됩니다.이렇게 많은 테이블을 다루는건 처음이구요.. DB연결과정은 이러합니다. express router -> db connection pool -> pool query -> 결과 반환 현재 DB는 nodejs의 Cluster와 express , mariadb 3가지 라이브러리를 이용중입니다. (API서버)express의 Router기능으로 mariadb의 Connection pool을 이용해서 작업을 진행하는데20만건이 있는 테이블을 작업할때 (insert or update [pool query부분] ) 딜레이가 좀 있더라구요 (대략 100ms).이게 평균적인건지 아니면 좀더 느린건지 궁금합니다.. 물론 그외의 테이블은 나노세컨드 단위입니다. 또 이것이 문제가 될거같아서 Queue 처리를할려고하는데 문제되는게 있을까요?

SDS_haein · Answer

슬로우 쿼리 찾아서 봐야할 것 같은데.대량의 DML 작업 시에만 발생되는 것이면 디스크 웨이트 문제일 가능성이 있습니다. (DISK 가 요청을 못 따라간다는 소리)Isolation Level 을 낮추는 방법도 있고 (낮춘다면 READ-COMMITTED 이 적당)select for 형태의 쿼리로 트랜젝션을 구간으로 형성되어있는지 체크도 필요합니다.속도 관련은 사용하는 DB나 서버, 쿼리, 기타 로직에 따라 제각각 다르기 때문에 확답은 못합니다. 큐 관련해서는 큐-테이블 방식이 실제로 데이터베이스를 위해 만들어진 것이 아니기 때문에 SQL Server Service Broker를 사용하는게 좋지만 비용적인 문제가 들 수 있고그렇다고 큐를 사용하기엔 성가신 문제가 있습니다.Isolation Level이 READ-COMMITTED여도 교착상태가 발생할 수 있고 READPAST에 홀드락이나 데드락이 걸릴 수 있기 때문에사용하려면 해당 역할과 사용 목적 등을 명확히 파악해야 합니다.

DB insert 부분질문

1개의 답변

Q&A 목록