역시 구글봇은 굉장하군요.
소스 설치한지 하루 밖에 안됬는데 벌써 300번 정도 접속해서 긁어갔네요.
그다음은 YandexBot
네이버 봇 끌어들이는 방법 어디 없나요.
네이버 블로그 만들어서 링크나 잔뜩 넣어볼까...
|
댓글을 작성하시려면 로그인이 필요합니다.
댓글 8개
User-agent: Google
Disallow: /data
User-agent: Googlebot
Disallow: /data
User-agent: Yahoo Slurp
Disallow: /
User-agent: Slurp
Disallow: /
전세계 모든 bot 이 와줬으면 좋겠다. 그럼.
User-agent: Googlebot
Disallow:
User-agent: MSNBot
Disallow:
User-agent: Slurp
Disallow:
User-agent: Teoma
Disallow:
User-agent: twiceler
Disallow:
User-agent: Gigabot
Disallow:
User-agent: Scrubby
Disallow:
User-agent: Robozilla
Disallow:
User-agent: Nutch
Disallow:
User-agent: ia_archiver
Disallow:
User-agent: baiduspider
Disallow:
User-agent: naverbot
Disallow:
User-agent: yeti
Disallow:
User-agent: *
Disallow:
Disallow: /cgi-bin/
보안상 cgin-bin 은 막아두시는 것이 좋습니다. 네이버의 bot 은 naverbot 입니다만... -..-;;;;
어짜피 해킹경로는 "책가방" 에서 자동검색해서 알려준다는...
반면 개별 php 페이지 접근은 Sir 님께서 친절하게 다 막아놔 주셨고....
고로, 저 글과 그누보드 사용자와는 전혀 상관이 없는 얘기 입니다. ^^
많이 노출될수록 유입률 증가.