spring 멀티스레드 환경에서 트랜잭션 롤백 처리

Question

안녕하세요!구글링하다가 마땅한 해결책을 찾아볼 수 없어 질문드립니다. 실무에서 결제 후 가입 처리를 진행할 때, 여러 테이블에 데이터를 저장하는 로직이 있습니다. 현재는 해당 로직이 하나의 트랜잭션 안에서 동기 방식으로 처리되고 있습니다.이 과정을 멀티스레드로 병렬 처리하여 성능을 개선하고자 합니다. 하지만 각 스레드에서 개별적으로 트랜잭션이 열리게 되면, 일부 작업에서 예외가 발생해도 다른 스레드의 작업은 커밋되어 전체 트랜잭션을 롤백할 수 없는 문제가 발생합니다.Spring 환경에서 이러한 문제를 어떻게 해결할 수 있을까요?즉, 멀티스레드 환경에서도 전체 작업을 하나의 트랜잭션처럼 묶어 처리하고, 예외 발생 시 전체 롤백할 수 있는 방법이 궁금합니다.관련하여 적절한 설계 방식이나 구현 전략이 있다면 조언 부탁드립니다.

정규분포 · Answer

전형적인 xy 문제네요. 일단 memcache가 아니라 SQL DB죠? 우선 롤백 문제부터 고민하지 마시고, SQL 쪽 코드만 비활성화 하고 병렬로 처리했을 때 얻는 성능 이점을 확인해 보세요. 확실히 premature optimisation 냄새가 납니다. 복잡도 대비 얻는 이득 거의 없다에 돈 겁니다.Spring 하시는거 보니 웹 백엔드에서 병렬처리 하시려는 것 같은데, 처리가 그만큼 복잡해지면 백엔드에서 처리할 것이 아니라 배치작업 쪽으로 넘어갑니다. 아키택쳐 설계로 접근해야 하는 문제임.

Courage · Answer

아무리 여러 테이블에 데이터를 넣는다고해도 멀티 스레드 구성으로 가져올 수 있는 이득은 별로 없을거 같은데요..원인을 다시 찾아보시는게 좋을거 같습니다.댓글의 예시는 단순한 구조에서 가능하지만 분산 환경이라면 불가능하죠.꼭 멀티 쓰레딩을 고려하신다면 보상 트랜젝션에 대해서 알아보세요.근데 안 찾아보고 원인 분석을 다시 하시길 적극 권장드립니다.

전뚱이인데요 · Answer

저도 이런 문제를 봉착했는데.. 시스템상 롤백은 어렵고 비슷하게 흉내를 냈는데Future 객체에 db에 적재된 pk (id) 값을 가져와서 적재하다가 문제가 발생하면 (비지니스 문제) 해당 id 리스트를 db에서 삭제 하는 방식으로 처리했습니다 문제는 실제로 서버에 문제가 발생해서 원자성을 지켜야할 때는 해결할 수 없는 문제이긴 하죠 특정 작업을 여러개로 나눠서 처리하는 forkJoin 프레임워크도 존재합니다만 병렬적으로 처리 말고도비동기로 작업을 처리하는 식으로도 고민을 해봐야할거 같습니다

전뚱이인데요 · Answer

흠 제가 더 고민 해보았는데 지금 상황을 보니 I/O 병목현상을 해결하기 위해서 병렬적으로 처리 할려고 하는거 같아요 지금 상황으로는 예외 발생 시 전체 롤백은 불가능하고 실패한 작업에 대해서 알림 처리를 해주는 방식이 있을거 같아요 아니면 실패한 작업이 재 시도 하면 가능하다고 하면 큐에다가 작업을 다시 담아서 재시도를 하는 방법도 있을거 같은데 궁극적으로 예외발생 시 전체 롤백은 불가능합니다

아름이름 · Answer

결국 db 작업이 느린 문제를 병렬로 처리 하는거 자체가 어페가 있네요.저라면 Db 작업을 빠르게 하는 방안을 찾을듯요. Bulk insert나 db 템프테이블 사용하면 성능 이슈 없어 보입니다.

초무쿤 · Answer

PlatformTransactionManager 가 ThreadLocal로 동작하기 때문에Callable + ThreadPoolExecutor.로 하더라도 안될껄요?그리고 가입 비지니스 상 성능문제로 병렬로 처리하는게 맞나 싶은데요..동기처리 하는게 맞아보이는데요.(시간이 오래걸리는 작업들은 트랜잭션 분리하고 비동기로 하고 해피콜 callback 받는 방식으로 하시던지 하시는게..보통 통신사들 핸드폰 개통할때 그렇게...문제는 후처리 시 오류나게 되면 뭔가 처리하는 프로세스가 또 들어간다는 단점이 있지만..)

yeori · Answer

예외의 맥락을 알아야 대응이 가능할 겁니다.시도할 때 실패할 수도 있는 작업인지실패했을 때 retry가 필요한 지처음 실패해도 잠시 후 재시도하면 성공하는 작업인지...등등그리고 성능 때문인지 일관성 때문인지 문제 상황이 명확해야 대응할 수 있지 않나 싶습니다.위 글만 보면 성능보다는 sub job들 중에 하나가 삑사리 났을 때 일관성이 깨지는 문제 때문이 아닌가 싶은데 그렇게 실패하면 전체 job을 다 버려도 되는지도 중요합니다.안 그런 job이 더 많거든요

고등어통조림 · Answer

@Async 인가 하는 어노테이션으로 비동기처리를 진행할 수 있는데 그 안에 어떤 순서나 단위로 처리할지 설계를 잘 하셔야 할것 같네요디비 트랜잭션은 @Transactional 많이 쓰는 것 같았구요

기무다이수루룩 · Answer

먼저 스레드와 db트랜잭션에 대해 이해를 해야합니다.db 트랜잭션은 1개의 스레드로만 처리가 가능하죠.따라서 멀티스레드 환경에서는 1개의 스레드별로 db트랜잭션이 생성되는것입니다.말씀하신데로 멀티스레드를 1개의 트랜잭션으로 관리할 수 는 없습니다.실무에서는 1개의 트랜잭션으로 묶어야하는 경우는 멀티스레드를 사용하지않습니다.

spring 멀티스레드 환경에서 트랜잭션 롤백 처리

9개의 답변

기술 목록