병렬처리 질문 드립니다(서버 동시에 2개 돌리기)

Question

안녕하세요 개발자가 된지 이제 8개월차인 개린이 입니다!이번에 개발중인 프로젝트 중에 gateway timeout 문제로...많은양의 데이터를 조회하거나 다운로드 할 때 5분이 넘어가면 time out 에러가 떠서 진행이 안되더라구요..ㅠㅠ해결책을 구글에서 찾아봤는데..일단 가장 베스트는 서버에서 time을 늘리는? 그런 작업을 진행하는게 베스트라고 하던데..저희 회사 대표님께서는..그 방법을 원치 않으셨는지 다른 해결방법을 제시하라고 하는 제스쳐를 보이고 있습니다..(아마 비용 문제일듯..한게 제 추측입니다.)해서 저는 데이터를 병렬처리로 보내는 방법을 구글링 끝에 알게되어 진행을 하고 있는데요.. 제 생각처럼 진행이 되지 않더라구요제가 원하는 방향은클라이언트에서 서버로 데이터 전송을 보내 DB에서 데이터를 읽고 다시 클라이언트로 데이터를 response해서 조회든 다운로드든 돼야하는데, 이게 많은 양을 하다보니 5분이 넘어가버리는게 문제이니,3분마다 클라이언트에서 서버로 더미데이터를 보내고, 서버는 별도의 작업 필요 없이 더미데이터 (시간?)을 response해서 클라이언트에서 받고 console.log로 찍는거 까지가 제 목표입니다.이걸 테스트 하기 위해 개발서버에서(개발서버는 timeout 에러가 안뜹니다.) 15초 정도 걸리는 데이터를 조회하고 3초마다 더미데이터를 보내는 식의 코드를 작성해봤는데..결과는 조회 중간에 더미데이터로 시간을 보내지 않고.. 조회 데이터가 끝난 이후에야 시간데이터를 클라이언트로 보내고 있습니다.. 심지어 3초마다 시간이 증가되는것도 아닌 처음 시작 그 시간 그대로를 4번을 보내고있습니다..코드 작성에 문제가 있는건지,, 아니면 원래 안되는건지..ㅠㅠ 원래 안될거 같지는 않은데...선배님들의 자문을 구합니다ㅜㅜ현재 서버는 php를 이용하고 있고클라이언트는 javascript를 이용하고 있습니다!javascript 코드function Query(items) { if (!$(&#34;#keyword&#34;).val() && (typeof(items) &#61;&#61; 'undefined' || items &#61;&#61; &#34;&#34;)) { alert('검색어를 입력하세요'); return; } g_items &#61; items; var s_dt &#61; new Date($(&#34;#start_date&#34;).val()); var e_dt &#61; new Date($(&#34;#end_date&#34;).val()); var diff &#61; Math.ceil((e_dt.getTime()-s_dt.getTime())/(1000*3600*24)); if (diff >&#61; 11365) { var today &#61; new Date(); if (today.getHours() > 10 && today.getMinutes() >&#61; 30) { alert('조회기간 1년 이상은 오전 10시30분까지만 가능합니다.'); return; } } else { alert('조회기간은 1년이내만 설정 가능합니다.'); return; } var sendPing &#61; setInterval(connectionP, 3000); var params &#61; {}; params['template'] &#61; &#34;E400&#34;; params['action'] &#61; &#34;grid&#34;; params['keyword'] &#61; $(&#34;#keyword&#34;).val(); params['items'] &#61; items; params['warehouse_seq'] &#61; $(&#34;#shop_seq&#34;).val(); params['start_date'] &#61; $(&#34;#start_date&#34;).val(); params['end_date'] &#61; $(&#34;#end_date&#34;).val(); params['search_type'] &#61; $(&#34;#search_type option:selected&#34;).val(); params['disp_type'] &#61; $(&#34;#disp_type option:selected&#34;).val(); show_waiting(); $.post(&#34;function.php&#34;, params, function(data) { hide_waiting(); clearInterval(sendPing); $(&#34;#maingrid&#34;).html( data ); }); } function connectionP() { var params &#61; {}; params['template'] &#61; &#34;E400&#34;; params['action'] &#61; 'recv_ping'; $.post(&#34;function.php&#34;, {}, function(data){ console.log('ping succ'); }); } 서버에서 grid는 조회하는 코드인데 워낙 방대해서..패스입니다. function recv_ping() { echo json_encode('1'); }코드에 문제가 있다면 어디를 수정해야 할까요..ㅜㅅㅜ앗 참고로 limit을 걸수도 없는 상황입니다...

Clickin · Answer

보통 이런건 비동기로 구현하는데 방향을 이상한 방식으로 잡고계시네요일반적인 웹 서비스에서 시간이 오래 걸리는 작업을 사용자가 기다리게 만드는건 사용자 이탈률이 높아질 수밖에 없어서 좋지 못한 방법입니다. 사실 1분 기다리는 것도 깁니다. 잘 생각해보세요. 작성자님 기준으로도 다른 서비스나 앱 써봤을 때 20초 걸린다? 다른거 하러 갔을겁니다.이런 경우는 작업 큐를 구현하고 사용자의 요청은 작업 큐에 올라간 다음 작업이 완료되었을 때 사용자에게 알림을 보내는 방향으로 생각해보면 됩니다.

캐티 · Answer

지금 사용하는 서버가 php에서 대량 접속을 처리하지 못하는 것이 원인이지 않나요.aspnetcore+php 서버에 최근 최소 스레드를 4096개로 지정하였어요. 이보다 커지면 로드벨런서로 서버를 나누어 주어야 할 것으로 망해요.도커 허브에 패치를 적용하였지만 아직 깃 소스코드에 새 코드를 올리지 않았어요. 몇 가지 수정 사항을 더 반영할 예정이빈다.[1] https://github.com/nyakuz/nightmare

더미 · Answer

어떻게 찾았는지 모르겠는데 timeout 늘리는건 베스트가 아니라가장 간단히 해결하는 방법입니다. (시간없을때 쓰는 방법)근본적인 해결방법이 아니라 거부하신거지 돈문제가 아닙니다

병렬처리 질문 드립니다(서버 동시에 2개 돌리기)

3개의 답변

기술 목록