네이버 카페 크롤링을 위한 puppeteer 및 로그인 관련 질문...

Question

안녕하세요 프론트엔드 공부중인 사람입니다!제목을 어떻게 지어야 할지 몰라 난해한데 질문이 있어 글을 올렸습니다.하고 싶은것은 제가 가입한 네이버 카페의 게시글중 동영상을 추출, 동영상만 모아보는 숏츠같은 프로젝트입니다.네이버 제공 API중에서는 가입 카페 목록을 얻을 수 없고, 제가 원하는 조건의 게시글의 수가 너무 부족하여 크롤링을 구현했습니다.(클라이언트는 리액트, 서버는 node.js + express, puppeteer 크롤링 라이브러리 사용)지금의 흐름은 서버에서 puppeteer 브라우저 headless 속성 : false로 네이버 로그인 페이지 가상 브라우저를 띄어주고, 사용자가 직접 로그인 페이지에 id, pw 입력하여 로그인 성공하면 NID등 로그인 인증관련 쿠키를 추출추출한 쿠키를 다시 크롤링하는 puppeteer 브라우저에 삽입 이후,제가 원하는 가입한 카페 게시글에서 동영상 크롤링,크롤링한 데이터 클라이언트 전달 후 화면에 보여주기이 흐름으로 pc 로컬환경에서 진행시 잘되긴합니다.(로그인을 puppeteer 브라우저로 구현한 이유는 네이버 소셜 로그인으로는 제가 가입한 카페 정보를 알아낼수가 없고,소셜 로그인 완료한 브라우저에는 제가 원하는 일반적인 로그인이 완료되었을때, 생성되는 쿠키들이 없어서 입니다)문제는 전 모바일에서 구현하고 싶어서, 모바일 브라우저로 실행하면 저 puppeteer의 로그인 브라우저가 나오지를 않아서 어떤식으로 해답을 생각해봐야할지...검색 키워드 감도 못잡고있어서 의견을 주시면 감사하겠습니다...

캐티 · Answer

모바일에서 로그인이 안된다면 무언가 잘못하였겠쩌. 모바일 크롬에서도 전혀 안되지는 않을 것이어요.

네이버 카페 크롤링을 위한 puppeteer 및 로그인 관련 질문...

1개의 답변

Q&A 목록