간단한 셀레니움 질문입니다

Question

selenium을 이용해 구글 크롬에서 이미지를 크롤링하는 프로그램입니다.어떤 이미지를 찾을 건지 키워드를 물어보고 총 몇장을 크롤링 할건지 물어본 다음 자동으로 크롤링해주는 코드인데 어떤 부분에서 문제가 발생한건지 잘 모르겠네요의심가는 부분은 현재 크롬 버전은 114.0.5735.134 (64비트) 이고 chromedriver 버전은 제일 최신 버전인 114.0.5735.90 이라서 그런건지 잘 모르겠네요두 번째 의심가는 부분은 셀레니움이 4.10.0 으로 업데이트 되면서 인자들이 몇몇 바뀐 부분들이 있던데 그 부분에서 충돌이 난건지...ㅠㅠ고수님들의 조언 부탁드립니다ㅠㅠ코드from selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsfrom bs4 import BeautifulSoupimport requestsimport osimport timedef download_image(url, dirname):response &#61; requests.get(url, stream&#61;True)image_name &#61; os.path.join(dirname, url.split(&#34;/&#34;)[-1])with open(image_name, 'wb') as out_file:out_file.write(response.content)def crawl_images(keyword, num_images):chrome_options &#61; Options()# Chromedriver의 경로를 지정해 주세요.driver &#61; webdriver.Chrome('C:\Temp\chromedriver.exe', options&#61;chrome_options)# Google 이미지 검색 URLurl &#61; &#34;https://www.google.com/search?tbm&#61;isch&hl&#61;ko&q&#61;&#34; &#43; keyword# URL에 접근driver.get(url)# 디렉토리 생성if not os.path.exists(keyword):os.makedirs(keyword)count &#61; 0while count < num_images:html &#61; driver.page_sourcesoup &#61; BeautifulSoup(html, 'html.parser')img_tags &#61; soup.find_all(&#34;img&#34;, class_&#61;&#34;rg_i&#34;)for tag in img_tags:if count < num_images:try:url &#61; tag['src']except KeyError:url &#61; tag['data-src']download_image(url, keyword)count &#43;&#61; 1else:break# 스크롤을 아래로 내려서 더 많은 이미지를 로딩driver.execute_script(&#34;window.scrollTo(0, document.body.scrollHeight);&#34;)time.sleep(2) # 잠시 대기driver.close()if __name__ &#61;&#61; &#34;__main__&#34;:keyword &#61; input(&#34;검색할 이미지의 키워드를 입력하세요: &#34;)num_images &#61; int(input(&#34;다운받을 이미지의 개수를 입력하세요: &#34;))crawl_images(keyword, num_images)입력검색할 이미지의 키워드를 입력하세요: harry kane다운받을 이미지의 개수를 입력하세요: 100에러메시지Traceback (most recent call last): File &#34;c:\Users\boseok\Documents\VSC project\google_image_crawling&#34;, line 56, in <module> crawl_images(keyword, num_images) File &#34;c:\Users\boseok\Documents\VSC project\google_image_crawling&#34;, line 18, in crawl_images driver &#61; webdriver.Chrome('C:\Temp\chromedriver.exe', options&#61;chrome_options) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ TypeError: WebDriver.__init__() got multiple values for argument 'options'드라이버 Exe 파일을 path 환경변수에 해당되는 경로중 한곳에 넣고 경로 인자를 webdriver.Chrome() 함수에서 뺀 코드from selenium import webdriverfrom bs4 import BeautifulSoupimport requestsimport osimport timedef download_image(url, dirname): response &#61; requests.get(url, stream&#61;True) image_name &#61; os.path.join(dirname, url.split(&#34;/&#34;)[-1]) with open(image_name, 'wb') as out_file: out_file.write(response.content)def crawl_images(keyword, num_images): # Chromedriver의 경로를 지정하지 않습니다. driver &#61; webdriver.Chrome() # Google 이미지 검색 URL url &#61; &#34;https://www.google.com/search?tbm&#61;isch&hl&#61;ko&q&#61;&#34; &#43; keyword # URL에 접근 driver.get(url) # 디렉토리 생성 if not os.path.exists(keyword): os.makedirs(keyword) count &#61; 0 while count < num_images: html &#61; driver.page_source soup &#61; BeautifulSoup(html, 'html.parser') img_tags &#61; soup.find_all(&#34;img&#34;, class_&#61;&#34;rg_i&#34;) for tag in img_tags: if count < num_images: try: url &#61; tag['src'] except KeyError: url &#61; tag['data-src'] download_image(url, keyword) count &#43;&#61; 1 else: break # 스크롤을 아래로 내려서 더 많은 이미지를 로딩 driver.execute_script(&#34;window.scrollTo(0, document.body.scrollHeight);&#34;) time.sleep(2) # 잠시 대기 driver.close()if __name__ &#61;&#61; &#34;__main__&#34;: keyword &#61; input(&#34;검색할 이미지의 키워드를 입력하세요: &#34;) num_images &#61; int(input(&#34;다운받을 이미지의 개수를 입력하세요: &#34;)) crawl_images(keyword, num_images)

Throwaway · Answer

드라이버Exe 파일을 path 환경변수에 해당되는 경로중 한곳에 넣구 경로 인자를 webdriver.Chrome() 함수에서 빼보세요

간단한 셀레니움 질문입니다

1개의 답변

#selenium 목록