카산드라 DB를 왜쓰나요?

Question

현재 프로젝트 중간에 투입된 상태입니다. 여기선 카산드라 DB를 사용하고 있더라고요. 저는 처음 사용해 봅니다. 저의 역할을 카산드라 DB에 있는 데이터를 읽어와 주기적으로 배치 처리를 하는 업무입니다. 1. 상황 설명 가. TABLE_A는 매일 10만건의 데이터가 쌓임 나. TABLE_A에 있는 상태 필드가 STATUS_FLAG 있음. 배치 처리 전 값 'N' 배치 처리 후 값 'Y' - STATUS_FLAG 필드는 secondary index가 걸려 있음. 2. 제가 생각한 처리 방식 가. 배치 처리 대상을 불러옴 SELECT * FROM TABLE_A WHERE STATUS_FLAG &#61; 'N'; 나. 데이터 처리 작업 수행 다. 데이터 처리 후 상태 플래그 변경 UPDATE TABLE_A SET STATUS_FLAG &#61; 'Y' WHERE ID &#61; ... ; 3. 발생한 문제 '2.가' 과정에서 데이터를 조회 할 때 아래 오류가 나옴 Cassandra timeout during read query at consistency ONE (1 responses were required but only 0 replica responded) 구글링 해보니 여러가지 원인이 있더라고요. 그 중에 cassandra.yaml 설정에서 request_timeout_in_ms, read_request_timeout_in_ms 값을 많이 늘려 주었습니다. 오랜시간 쿼리가 수행되지만 다행이 오류가 발생하지 않더라고요. 하지만 이 방법이 근본적인 해결책은 아닌 것 같네요. 4. 질문 - 이렇게 단순한 쿼리도 timeout 걸릴 정도로 오류가 발생하나요? 해결책은 없나요? - 카산드라 DB의 특성을 잘 모르고 사용한건가요? 그렇게 특별한 기능을 사용한 것 같지도 않은데 말이죠. 5. 그밖에 앞서 프로젝트 수행하고 있는 사람에게 물어봤어요? 왜 카산드라 DB를 사용하게 되었냐고? 빅데이터 처리 관련된 프로젝트라서 사용하게 되었다고 하네요 ㅡㅡ; 그 밖에 다른 이유는 없고요.

초무쿤 · Answer

노드중 한대가 이상해서 그런거 같습니다만..분산db라 hive도 데이터노드 한대 이상하면 SQL실행결과가 오래 걸리던데요.분산DB특성상 어쩔수 없는 모양입니다.

카산드라 DB를 왜쓰나요?

1개의 답변

Q&A 목록