크롤링 방향을 어떻게 잡아야 할까요??

Question

안녕하세요. 코딩, 크롤링 처음하는 학생입니다 Post 형식을 쓰는 게시판에서 게시글은 url이 다 다른데요이럴때 약 5천 건의 게시글을 크롤링하려면 어떤 방식을 이용해야 할까요..?유튜브에 셀레니움 영상 따라하면서 게시판에서 검색어 검색하는 것까지 만들었는데 검색하니까 게시글이 약 오천개 나옵니다ㅠ Url이 다르면 get방식을 쓰라고 봤는데 url뒤에 붙는건 날짜고 제가 검색한 키워드랑은 연관이 없습니다 ㅠ방향 조언좀 부탁드립니다..!

kenu,전독시 · Answer

어떤 사이트인가요?사이트 이용약관에 크롤링 관련 부분은 확인이 필요합니다.법적인 이슈가 생길 수도 있기 때문입니다.

킁킁탐정 · Answer

https://info.krx.co.kr/contents/KRX/06/06070200/KRX06070200.jsp한국거래소가 제공하는 서비스에 관한 저작권 및 기타 지적재산권은 한국거래소에 속합니다. 이용자는 한국거래소가 제공하는 서비스를 무단으로 전재하거나 한국거래소의 사전 동의없이 복제, 전송, 출판, 배포, 방송 기타 방법에 의하여 이용하거나 제3자에게 무단으로 배포 할 수 없습니다.

크롤링 방향을 어떻게 잡아야 할까요??

2개의 답변

Q&A 목록