ROBOT.TXT 설정에 관련하여 문의드립니다.
본문
현재 특정게시판을 차단하고 싶어서 아래와 같이 했는데요
이렇게 하면 검색에 노출이 안되는 건가요?
Disallow: /?bo_table=adcast
이렇게 했는데도 긁어가서요... 특정게시판만 차단하고 싶습니다.
답변 2
robot.txt 가 아니라
robots.txt 입니다.
제가 오타났나보네요 robots.txt로 되어있어요..
근데 저렇게해도 다가져가여
권고사항이지 의무사항는 아니지 않나요?
차라리 비회원 글읽기를 막으시기 바랍니다.
답변은 아닌데... 궁금해서요...ㅋ
로봇이 긁어가는지 볼 수도 있나요?ㅋ
저도 긁어가지 않았으면 해서요...ㅠㅋㅋ
제가 알기로는 크롤링 규칙대로 보장이 되지 않는다고 알고있습니다.
답변을 작성하시기 전에 로그인 해주세요.