OKKY
커뮤니티
Q&A
지식
이벤트
Contact
부트캠프
Jobs
Search Bar
로그인
회원가입
scarping
전체
최신순
질문하기
답변
0
도롱도로도로도로동
·
6년 이상
538
0
답변 0
파이썬 스크래핑 병렬처리중 정해진범위값 실행전 프로그램이 끝나는데 그 이유가 궁금합니다.
제가 스포츠 사이트에서 웹페이지내 src 값 기반으로 선수 사진,기록들만 단일 프로세스로 스크래핑을 하던중 src값이 중간에 넓은 범위동안 존재하지않고 전체 범위가 십만단위여서 속도를 향상시키고자 병렬처리로 다시 코드를 짰습니다. 그래서 Pool을 사용하여 프로세스를 4개 할당하고 실행시키니 200정도 까지 파다가 아무 오류 없이 종료가 되었습니다. 디버깅시에도 정상종료되었다는 exit(1)이 뜹니다. 고민하던중 생각없
Search Bar
