Python selenium 크롤링 문제

Question

안녕하세요. 도움을 요청하고자 합니다.python에서 selenium으로 크롤링을 하고 있는데 알 수 없는 부분이 있어서 질문드립니다.url &#61; 'https://onlyeco.co.kr/?NaPm&#61;ct%3Dlscgm54a%7Cci%3Dcheckout%7Ctr%3Dds%7Ctrx%3Dnull%7Chk%3D2241163cb9325517f31f0fb5a0181621edd652c4'driver.get(url)driver.maximize_window()time.sleep(2)# 리빙 탭으로 이동driver.find_element(By.XPATH, '//*[&#64;id&#61;&#34;slideCateList&#34;]/ul/li[4]/a').click()time.sleep(2)# 상품 리스트items &#61; driver.find_elements(By.ID, 'contents')print(items)# 스크롤 내리기(이미지 로딩)driver.execute_script(&#34;window.scrollTo(0, document.body.scrollHeight);&#34;)time.sleep(2)for item in items: imageDiv &#61; item.find_element(By.CLASS_NAME, &#34;prdImg&#34;) url &#61; imageDiv.find_element(By.TAG_NAME, &#34;a&#34;).get_attribute('href') thumbnail &#61; imageDiv.find_element(By.TAG_NAME, &#34;img&#34;).get_attribute('src') title &#61; item.find_element(By.CLASS_NAME, 'name').text price &#61; item.find_element(By.XPATH, '//li[&#64;rel&#61;&#34;판매가&#34;]').text # 데이터 삽입 쿼리 실행 insert_query &#61; &#34;INSERT INTO bgshop (url, title, price, thumbnail) VALUES (%s, %s, %s, %s);&#34; cursor.execute(insert_query, (url, title, price, thumbnail))driver.quit()결과로는 DB에 첫번째 품목의 데이터만 저장됩니다.문제점은 items 부분인걸로 추측이 되는데 어째서 첫번째 품목의 데이터만가져와지는지 의문입니다.

Dive_Drink_Develope · Answer

스크롤 먼저 하고 By.Class, "box" 로 items를 가져와야하지 않을까요.id매칭 객체는 하나만존재하기 때문에 foreach가 한번만 실행되는게 당연해보입니다.

Python selenium 크롤링 문제

1개의 답변

#selenium 목록