배치처리하는데.. sql에서 in절을 통한 한번에 호출과 = 비교를 통한 여러번 호출시 뭐가 더 효율적인가요?

Question

1만건의 데이터를 업데이트 하게 됩니다.PreparedStatement의 배치기능을 이용한다고 가정한다면..for (i &#61; 0; i < 10000; i&#43;&#43;) { update 테이블명 수정컬럼 &#61; #{값} where pk &#61; #{pk} // 배처 처리}for (i &#61; 0; i < 10000/500; i&#43;&#43;) {update 테이블명 수정컬럼 &#61; #{값} where pk in (#{pk}, #{pk} #{pk}, #{pk}, #{pk}, .... 500개씩 처리) // 배치처리 (in절은 매개변수 값은 무조건 500개 고정)}뭐가 더 효율적인 방법일까요?

옥다방고양이 · Answer

1번으로 처리하세요.✅️2번 작업은 노가다 작업을 동반하는 방법입니다&#x1f449;나중에 수정할때, 운영할때, 오류분석할때 좋지않은 방법입니다(분석화면에 쓸데없이 복잡하게 나옴)✅️보통, 깔끔하고, 알기쉬운 로직이 성능도 좋음

집킨 · Answer

효율로만 따지면 무조건 2번이죠 단, 처리해야할 데이터 수가 많다면 쿼리 외적인 부분도 고려해야합니다예를 들어서 mysql 의 경우 배치가 실행되는 동안 innodb buffer pool 이 부족할수도 있고 redo log 가 부족할수도 있습니다

선플개발자 · Answer

저한테 같은 업무가 주어진다면2번을 베이스로 좀더 나은 방법이 없는지 고민해볼거 같네요.

Dive_Drink_Develope · Answer

저도 옛날 사람이라 2번......임시테이블을 생성해서 pk 다 때려넣고 in절에서 임시테이블로 select 를 때려버리는건 어떨까 하는 생각이 잠깐 들었읍니다.

르매 · Answer

임시테이블 만들고 pk 1만개 인서트를 먼저 합니다.임시테이블과 조인해서 한 번에 1천개씩 업데이트를 루프 돌면서 하면 됩니다.디게 가장 빠르고 DB 부하도 가장 적어요.

배치처리하는데.. sql에서 in절을 통한 한번에 호출과 = 비교를 통한 여러번 호출시 뭐가 더 효율적인가요?

5개의 답변

기술 목록