[웹 스크래핑 할때 html에 숨겨진 부위 가져오는 방법]

Question

node js 로 웹 서비스 만들어보려고 공부중인 초보입니다. 1. 상품 판매 페이지 url 입력 2. 해당 품목 정보 출력 - 썸네일, 상품명, 가격, 옵션선택지3. 옵션 선택 후 구매 버튼4. 가격 정보에 따라 결제받기 5. 매크로를 이용하여 실제 판매페이지에서 주문하기라는 식의 서비스를 간단히 개발해 보려합니다. 2번과정에서 cheerio 스크래퍼를 이용해 html을 긁어오고그 속에서 데이터를 찾으려 하였습니다. 그런데, 옵션 선택지를 불러오는데에서 문제가 발생했습니다. 위와 같은 형태의 옵션은품종 선택 / 스테비아 토마토aira-expanded = "ture" 가 되어야 아래 선택지 리스트들이 html 상에 나타나더라구요. 최초에 html을 가져오기 전에 저 속성을 바꾼 상태의 html을 가져올 수 있는 방법이 있을까요? 이 외에도 이 서비스 개발에 도움이 될만한 이야기들이 있으면 해주시면 감사하겠습니다.

[웹 스크래핑 할때 html에 숨겨진 부위 가져오는 방법]

0개의 답변

Q&A 목록