검색봇이 사이트에서 검색하는것 차단 방법 없나요?
본문
검색봇들이 사이트에 와서는 글작성들의 아이디및 게시글들을 가지고,
메인페이지에 검색에 검색을 실행하는데 이거 차단 방법좀 없을까요?
그누보드 버그인가 해서 문의했는데, 편리님이 알려주신 방법
<META NAME="ROBOTS" CONTENT="INDEX, NOFOLLOW">
으로는 해결이 안되네요 ;;
그렇다고 검색을 다 막으면 검색해서 방문하는 사람을 막게 되는거 같구요.
답변 3
아니요....
robots.txt 파일은 최상위 폴더에 두시면 됩니다.
근데 검색부분은 robots.txt로 막지 못할거에요.
검색엔진에서 robot.txt를 검색해 보세요.
로봇이 오는 경로가 다양해서
robots.txt 부터 다양하게 막아놔야...
사이트검색등록은 물론 안되어있어야되고..
전 저만의 작업서버에 로봇들이 오더라구요 - -무서움
답변을 작성하시기 전에 로그인 해주세요.