OKKY
커뮤니티
Q&A
지식
이벤트
Contact
부트캠프
Jobs
Search Bar
로그인
회원가입
playwright
전체
최신순
질문하기
해결
2
꿈은없고요놀고싶습니다
·
4개월
736
0
해결 2
웹 크롤링 하실때 어떤 도구를 사용하시나요?
현재 셀레니움을 사용하여 5000개 정도의 웹 페이지를 크롤링 하는 로직을 개발중입니다. 그런데 프로그램을 작성하다 보니, playwright 가 속도도 더 빠르고 현대 동적 웹사이트에 특화되어 있다하여 적용해보니. 이상할 정도로 차단되는 사이트들이 많았습니다. 제 생각에는 셀레니움과 거의 차이없이 크롤링이 가능해야 할텐데, 셀레니움이 2000개 사이트를 병렬로 안정적으로 긁어올동안 playwright는 접근 조차 안되는 사이트들이 많았는데 이유를 모
답변
0
goodsocks
·
1년 이상
248
0
답변 0
playwright 즐겨 사용하시는분 계신가요?
selenium의 극악한 속도때문에 playwright로 굳이 코드변경해서 사용하려고 하는데 제약되는 웹사이트가 많네요. 특히 클릭을 비활성화 하고나 막아 놓은 사이트들이 꽤 있어서 어려움이 있는데, 자동화 인식방지 코드라도 잘못 입력한건지 궁금하네요..
Search Bar
