채택완료
robots.tx 파일 설정 문의 - 특정폴더 접근 제한 방법
구글 로봇이 트래픽을 너무 잡아 먹어서 이미지가 있는 폴더를 접근제한해 볼려고 합니다.
아래와 같이 robots.txt 파일을 설정하면,
모든 로봇이 사이트에 접근할 수 있고,
구글 로봇도 사이트에 접근할 수 있는데, /data/file/land 폴더는 접근할 수 없다.. 맞는지요?
User-agent: *
Allow: /
User-agent: Googlebot
Disallow: /data/file/land/
|
답변 1개
채택된 답변
+20 포인트
2021-06-21 (월) 09:05:07
참조하시면 됩니다.
답변을 작성하려면 로그인이 필요합니다.