User-agent: * Allow: / Disallow: /adm/
이렇게 사용중인데 혹시 disallow 에 추가하면 좋을만한거 있을까요??
불필요한곳은 못들어가게 하고싶은데 adm디렉토리말고 또 있으면 추천좀 부탁드립니다!!!
저는 이미지를 크롤링 안시키기에 아래처럼합니다.
User-agent: * Allow: /
Disallow: /adm/ Disallow: /*.jpg Disallow: /*.png
댓글을 작성하려면 로그인이 필요합니다.
답변을 작성하려면 로그인이 필요합니다.
이 게시물을 신고 하시겠습니까?신고사유를 선택해주세요.
