로봇수집 제외
본문
robots.tx
User-agent: *
Allow: /
Disallow: /?bo_table=a게시판
이렇게 하면 다른 것은 모두 수집이고
'a게시판' 만 수집 제외 맞나요 ?
답변 1
Disallow:는 디렉토리 경로만 적어주셔야 하고요
특정페이지 노출을 원치 않으시면 그 해당 스킨에 <meta 테그로 noindex 부분을 사용하셔야 합니다.
디렉토리 경로만이라면 어떻게 작성을 해야하는지요?
스킨 어떤 파일에 메타태그를 넣어야 할까요.
User-agent: *
Allow: /
Disallow: /?bo_table=a게시판
이렇게만 해두니 수집을 해가네요
웹마스터도구에 제외 게시판을 지정해도 수집이 되고요.
상단 게시판 헤더 부분에다 meta 태그를 넣으시면 될겁니다.
그리고 Disallow: /bbs 게시판 관련 디렉토리로 잡으시면 될것입니다.
반영한다고 바로 검색엔진에 반영되는게 아니라서 검색엔진에서 제외되는 부분인 1주일간의 시간 소요가 될수도 있습니다.
답변을 작성하시기 전에 로그인 해주세요.