nodejs 에서 웹스크래핑시 UnhandledPromiseRejectionWarning: Error: connect ETIMEDOUT xxxx at TCPConnectWrap.afterConnect 문제

Question

안녕하세요express로 롯데시네마 사이트에서 영화목록을 긁어와서 보여주는 코드를 짰습니다.로컬에서는 돌렸을땐 문제없이 잘 동작하는데google cloud compute engine에 올렸더니 (node:937) UnhandledPromiseRejectionWarning: Error: connect ETIMEDOUT 124.243.42.1:80 at TCPConnectWrap.afterConnect [as oncomplete] (net.js:1141:16) 이렇게 에러가 뜨서 찾아보니 아예 연결에 문제가 있는거 같았습니다.신기한건1. 로컬에서는 문제없는데 google cloud에서는 문제가 발생한다는 것 2. cgv나 네이버 에서 데이터긁어올때는 문제가 없는데 유독 롯데시네마에서만 이런 문제가 발생한 것3. 혹시나 해서 compute engine instance에서 핑 날려보니까 잘 보내졌던 것정도 입니다. express 코드는 아래와 같습니다. var lotteUrl &#61; 'http://www.lottecinema.co.kr/LCWS/Ticketing/TicketingData.aspx'; var dic &#61; {&#34;MethodName&#34;:&#34;GetTicketingPageTOBE&#34;,&#34;channelType&#34;:&#34;HO&#34;,&#34;osType&#34;:&#34;W&#34;,&#34;osVersion&#34;:&#34;Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36&#34;,&#34;memberOnNo&#34;:&#34;0&#34;}; var params &#61; new URLSearchParams(); params.append(&#34;paramList&#34;, JSON.stringify(dic)); axios.post(lotteUrl,params).then(response &#61;> { ... } 혹시 짐작가는 이유가 있을까요?감사합니다.

마르세유1 · Accepted Answer

tcp port ping 커맨드 날려보시는게 어떻까요

옥돔 · Answer

vm에서 124.243.42.1:80(롯데시네마) 핑 failvm에서 네이버로 핑 ok로컬에서124.243.42.1:80 핑 ok네이버에서는 답이 돌아오는 걸보니 vm의 방화벽엔 문제가 없는 것으로 보입니다.근데 로컬에서 똑같이 날려보니 대답이 돌아왔는데 124.243.42.1(롯데시네마) 에서 특정 ip대역(구글vm)에서 오는 요청을 차단한다고 해석할 수 있을지요?

nodejs 에서 웹스크래핑시 UnhandledPromiseRejectionWarning: Error: connect ETIMEDOUT xxxx at TCPConnectWrap.afterConnect 문제

2개의 답변

Q&A 목록