붕

요즘 트래픽초과가 종종 걸리는데

어떤놈인가 봤더니 이놈입니다.

66.249.77.49

구글봇입니다.

제가 1기가를 사용중인데 이놈이 220메가를 사용했네요.

자료도 많이 없는데 무슨 저리 트래픽을 사용했을가요.

점점 두면 커질것이고 근데 크롤링해야 구글에 노출될것이고

어캐할지 애매합니다. ㅡㅡ
|

댓글 5개

자고로 검색로봇은 막지말고 놔두라고 구글신께 말씀하셨습니다.
저도 그게 정답이라고 생각합니다. ㅋ
크롤링 주기를 좀 길게 줘보세요
구글이 220M 이면 아마 그 외에 네이년, 다음, 빙 등등 해서 거의 절반 이상은 다 사용했을거 같네요 ㅎㅎ
cloudflare 한번 적용해보세요.
전 하루 트래픽이 1TB 이상 나오는데... 적용 후 서버 mrtg 확인해보니 평균 15Mbps로 트래픽 절감 효과가 엄청납니다.
댓글을 작성하시려면 로그인이 필요합니다.

자유게시판

203,346건
+
제목 글쓴이 날짜 조회
14-06-10 조회 1,911
14-06-09 조회 1,348
14-06-09 조회 1,892
14-06-09 조회 2,518
14-06-09 조회 1,361
14-06-09 조회 1,835
14-06-09 조회 1,501
14-06-09 조회 1,887
14-06-09 조회 1,981
14-06-09 조회 1,626
14-06-09 조회 1,425
14-06-09 조회 1,890
14-06-09 조회 1,635
14-06-09 조회 1,885
14-06-09 조회 2,294
14-06-09 조회 2,183
14-06-09 조회 2,154
14-06-09 조회 2,233
14-06-09 조회 1,775
14-06-09 조회 1,737