robots.txt에 대하여 질문이 있습니다.

Question

robotx.txt 에 User-agent: *Disallow: / 이걸 넣으면 url접속 ( 예를들어 www.abc.com/robots.txt )이렇게도 접속이 안되나요? 그리고 robots.txt 만드는 방법은 그냥 파일 이름 robots.txt 하고 다른 작업없이 내용 집어넣으면 끝인가요?

selectjun · Answer

robots.txt로 disable처리를 한다고 페이지가 접속이 안되거나 하지 않습니다. 다만 안해주시면 구글에 해당 페이지가 노출은 되요.그리고 별다른 작업없이 txt파일을 만들고, 내용만 집어 넣으시면 되요.해당 내용에 대해서는 https://developers.google.com/search/docs/advanced/robots/intro?hl&#61;ko 에서 확인해보시면 됩니다.

robots.txt에 대하여 질문이 있습니다.

1개의 답변

Q&A 목록