cloudflare 사용하는 웹사이트 크롤링 안 되나요?

Question

예전에는 cloudflare 사이트도 agent 값이나 리퍼러 값 조정하면 크롤링이 됐던거 같은데요.요즘은 아예 접근이 안 되네요.구글을 찾아봐도 딱히 정보가 안 나오는데요.이제 cloudflare 사이트는 아예 크롤링이 안 되는 걸까요?

캐티 · Answer

방어가 걸려 있어서 어렵겠지만 장인이면 되는 방법을 알고 있지 않겠나요.

1개의 답변