게시판에 로봇접근 막기
본문
홈페이지 내 특정 게시판 글을 로봇이 못 가져 가게 하려고 검색을 해서 얻은 답이 아래와 같습니다.
robots.txt 파일에 아래 내용을 넣어서 /최상위 폴더에 올려 두면 된다고 했는데요.
구글 관리자페이지 접속자 집계에 들어가니 robot 접근한 로그가 많이 나오는데요.
그렇다면 이건 게시판에 접근 한게 아니고 그냥 홈페이지(게시판을 제외한)에 접근한 기록을 뜻하는 걸까요?
그리고 아래 내용을 robots.txt에 넣으면 정말로 지정한 게시판에는 로봇이 정보를 안가져 가는게 맞나요?
User-agent: *
Disallow: /bbs/board.php?bo_table=게시판이름
제가 재대루 하고 있는지 궁금해서 질문 드립니다.
답변 2
네 그렇게 하시면됩니다.
하지만 요즘 robots.txt를 무시하는 로봇들이 종종 발견되더라구요....ㅠㅠ
<?php
$r = $_SERVER[‘HTTP_USER_AGENT’];
if ($r == “googlebot”) {
echo “I hate Google a lot.”;
die;
}
?>
이런식으로 해보세요
모든 로봇을 막아야 하는데
이렇게 하면 모두 적어줘야 하나요?
음..아니면 해외접속을 막으셔도 되죠
답변을 작성하시기 전에 로그인 해주세요.