그누보드 robots.txt 에 추가하면 좋을만한거있을까요??

그누보드 robots.txt 에 추가하면 좋을만한거있을까요??

QA

그누보드 robots.txt 에 추가하면 좋을만한거있을까요??

본문

User-agent: *
Allow: /
Disallow: /adm/

 

이렇게 사용중인데 혹시 disallow 에 추가하면 좋을만한거 있을까요??

불필요한곳은 못들어가게 하고싶은데 adm디렉토리말고 또 있으면 추천좀 부탁드립니다!!!

이 질문에 댓글 쓰기 :

답변 1

저는 이미지를 크롤링 안시키기에 아래처럼합니다.

User-agent: *
Allow: /

Disallow: /adm/
Disallow: /*.jpg
Disallow: /*.png

답변을 작성하시기 전에 로그인 해주세요.
전체 103
QA 내용 검색

회원로그인

(주)에스아이알소프트 / 대표:홍석명 / (06211) 서울특별시 강남구 역삼동 707-34 한신인터밸리24 서관 1404호 / E-Mail: admin@sir.kr
사업자등록번호: 217-81-36347 / 통신판매업신고번호:2014-서울강남-02098호 / 개인정보보호책임자:김민섭(minsup@sir.kr)
© SIRSOFT