Selenium으로 Kcar 크롤링 질문 드립니다.

Question

안녕하세요? Web crawling을 개인적으로 공부하고 있는데, 최근 관심사인 중고차 매물을 자동으로 탐색하는 Kcar web crawling을 시도하고 있습니다. 현재 Page를 넘어가는 기능 구현에 막혀있는데, 조언 부탁드립니다. Kcar의 페이지 전환 코드는, 아래와 같이 단순 list로 되어 있습니다. 네이버 쇼핑같은 경우 페이지 목록에 href 링크가 걸려있고, xpath로 요소를 선택한 다음, send_keys('
')으로 클릭할 수 있었는데요, kcar의 페이지는 위 방법으로는 클릭이 안됩니다. https://www.kcar.com/bc/search 어떻게 하면 페이지 위 코드에서, 페이지 넘어가는 기능을 구현할 수 있을까요?

태평장사꾼 · Answer

직접 구현 해 보지 않아서 잘 될지 모르겠지만 send_keys() 말고 click() 함수를 실행할 수 있지 않나 싶은데요. 만약 클릭을 할 수 없는 엘리먼트라면 그 오류 코드가 출력이 될 것 같고 꼭 번호를 눌러야 하는 게 아니라면 좌우 버튼에 click() 이벤트를 줘 보는 것도 좋을 것 같습니다.

1년했어요 · Answer

배열a은 1~10까지 들어있습니다.배열a로 반복 { 페이지넘기기 전에 하고싶은 일 다 하기. num&#61;[배열a][배열a]가 1이면 num &#61; num&#43;1 <&#61; 1페이지 두번안누르기 [배열a]를 10으로 나눠서 나머지가 없으면 nextFlag &#61; true <&#61; 10, 20...갔을때 다음장버튼누르기if(!nextFlag ){target &#61; brower.find_element(By.XPATH, f&#34;/html/body/div[1]/div/div/div[2]/div[2]/div[2]/div[4]/div[2]/div[3]/div/ul/li.pagingNum[{num}]/span&#34;)}else{ target &#61; brower.find_element(By.XPATH, f&#34;/html/body/div[1]/div/div/div[2]/div[2]/div[2]/div[4]/div[2]/div[3]/div/ul/li/button.pageNext&#34;)} target.click()} 대충 윗분도 이말씀하신듯하네요. click()처리하심 될듯합니다. li가 아니라 내부의 span에 페이지넘김 이벤트가 걸려있는듯하니 span까지 가서 눌러보셔요다음장 이벤트가 button에있는지 span에 있는지 모르겠네요오랜만에 보니까 유잼..

Selenium으로 Kcar 크롤링 질문 드립니다.

2개의 답변

Q&A 목록