크롤링 공부하는데 도움 부탁드려요

Question

body 부분을 전혀 못 가져오는데 왜 그럴까요?이런 저런 사이트 다 시도해봐도 결과가 같습니다.조언 좀 부탁드려요.코드결과물

언리얼 · Answer

fiddler로 까보고 referer나 useragent 헤더 확인하는 경우 있으니 검색..

shintwl · Answer

네이버에서 차단했을 가능성이 높습니다왠만하면 위키피디아 이런 곳으로 연습하세요

nubie · Answer

CSR이라서 그런거 아닐까요

양반후반 · Answer

요즘은 대부분 api를 통하여 데이터를 주고받기 때문에 페이지 url로 해당 페이지를 구성하는 모든 정보를 가져올 수 없습니다.그래서 셀레니움을 사용하여 실제 크로뮴 엔진에서 해당 url로 페이지를 열고 구성을 다 한 다음에 페이지 정보를 가져옵니다.

4개의 답변