robots.txt 설정 문의

robots.txt 설정 문의

QA

robots.txt 설정 문의

본문

구글 로봇이 트래픽을 너무 잡아 먹어서, 특정폴더(이미지폴더) 접근 제한을 할려고 하는데요.

아래와 같이 하면 맞는건가요? data 폴더에 이미지가 많아서 구글 로봇이 접근 못하게 할려고 하는데요.

실제로 저렇게 적용을 해보면, 트래픽의 영향이 거의 없더라구요.

 

User-agent: Googlebot
Disallow: /data/

 

 

아래와 같이 하면, 구글로봇이 사이트 접속을 하지 않는것은 확인을 했습니다.

 

User-agent: Googlebot
Disallow: /

이 질문에 댓글 쓰기 :

답변을 작성하시기 전에 로그인 해주세요.
전체 123,139 | RSS
QA 내용 검색

회원로그인

(주)에스아이알소프트 / 대표:홍석명 / (06211) 서울특별시 강남구 역삼동 707-34 한신인터밸리24 서관 1404호 / E-Mail: admin@sir.kr
사업자등록번호: 217-81-36347 / 통신판매업신고번호:2014-서울강남-02098호 / 개인정보보호책임자:김민섭(minsup@sir.kr)
© SIRSOFT