2026, 새로운 도약을 시작합니다.

역시 구글봇은 굉장하군요.


소스 설치한지 하루 밖에 안됬는데 벌써 300번 정도 접속해서 긁어갔네요.

그다음은 YandexBot


네이버 봇 끌어들이는 방법 어디 없나요.

네이버 블로그 만들어서 링크나 잔뜩 넣어볼까...


|

댓글 8개

네.. 구글봇.. 굉장하죠..
sir.co.kr 예:

User-agent: Google
Disallow: /data

User-agent: Googlebot
Disallow: /data

User-agent: Yahoo Slurp
Disallow: /

User-agent: Slurp
Disallow: /


전세계 모든 bot 이 와줬으면 좋겠다. 그럼.

User-agent: Googlebot
Disallow:
User-agent: MSNBot
Disallow:
User-agent: Slurp
Disallow:
User-agent: Teoma
Disallow:
User-agent: twiceler
Disallow:
User-agent: Gigabot
Disallow:
User-agent: Scrubby
Disallow:
User-agent: Robozilla
Disallow:
User-agent: Nutch
Disallow:
User-agent: ia_archiver
Disallow:
User-agent: baiduspider
Disallow:
User-agent: naverbot
Disallow:
User-agent: yeti
Disallow:
User-agent: *
Disallow:
Disallow: /cgi-bin/


보안상 cgin-bin 은 막아두시는 것이 좋습니다. 네이버의 bot 은 naverbot 입니다만... -..-;;;;
http://googlekoreablog.blogspot.com/2011/01/4-robotstxt.html
그누보드는 open source 라서 robots.txt 를 보고 해킹경로 힌트를 얻어야 할 필요가 없다는... ㅋㅋㅋ

어짜피 해킹경로는 "책가방" 에서 자동검색해서 알려준다는...

반면 개별 php 페이지 접근은 Sir 님께서 친절하게 다 막아놔 주셨고....

고로, 저 글과 그누보드 사용자와는 전혀 상관이 없는 얘기 입니다. ^^
구글봇 무섭습니다;; ㅎㄷㄷㄷ
아이피 대역으로 차단해도 1~2일 정도 잠잠하다가 다른아이피로와서 엄청 긁어가대요. ㄷㄷㄷ
근데 봇을 끌어 들이는 이유가... 트래픽 증가 때문만인가욤?
노출되서 방문객이 많아지기위함이죠.

많이 노출될수록 유입률 증가.

댓글 작성

댓글을 작성하시려면 로그인이 필요합니다.

로그인하기

자유게시판

번호 제목 글쓴이 날짜 조회
공지 6일 전 조회 451
200420 12시간 전 조회 33
200419 어제 조회 72
200418 2일 전 조회 58
200417 4일 전 조회 101
200416 4일 전 조회 83
200415 5일 전 조회 130
200414 5일 전 조회 153
200413 5일 전 조회 68
200412 5일 전 조회 165
200411 6일 전 조회 129
200410 6일 전 조회 157
200409 6일 전 조회 90
200408 6일 전 조회 95
200407 6일 전 조회 191
200406 6일 전 조회 114
200405 6일 전 조회 230
200404 6일 전 조회 181
200403 1주 전 조회 289
200402 1주 전 조회 202
200401 1주 전 조회 150
200400 1주 전 조회 221
200399 1주 전 조회 160
200398 1주 전 조회 236
200397 1주 전 조회 119
200396 1주 전 조회 128
200395 1주 전 조회 102
200394 1주 전 조회 88
200393 1주 전 조회 126
200392 1주 전 조회 266
200391 1주 전 조회 185
🐛 버그신고