구글 크롤링 때문에 죽겠네요..나스로 직접 서버를 운영하는데요..트래픽이...
본문
구글에서 트래픽이 미친듯이 들어와서..
크롤링 속도를 아주 늦게 가져가게 해 놓으면 cpu가 좀 나아지는데요.. 3개월후에 또 해야 합니다...
문제는 3개월에 한 번 씩 해주는게 아주 아주 귀찮아요...ㅠㅠ
혹시 구글 크롤링이 퍼가는 속도를 아주 늦게 하는 소스나 팁이 있을까요 ?
차단을 하고싶지만 차단을 하면 글을 안퍼가면 방문자가 줄어드는 역 효과가 나서요..
서버에 cpu를 거의 항상 80% 풀로 돌리고 어떨때는 90% 이상 돌아갑니다.
mysql을 껐다가 다시 바로 켜도 마찬가지에요...
그리고 혹시 xe에는 cpu 누가 가장 트래픽을 많이 클릭하는지 나오던데...
그누보드는 없는지요 ?
트래픽 때문에 죽겠습니다...도와주세요...ㅠㅠ
답변 2
단순 봇접근으로 cpu가 80% 로드라면
다른부분을 의심해봐야 합니다.
nas 사용자이시니 nas 내에서 외부 트래픽 관련 패널이 있을거에요.
그런가요..한 번 확인해 봐야겟네요..
이상하네요. 그렇게 퍼갈리가 없을텐데요.
꾸준히 와서 새로운 것만 퍼가던데
RSS나 사이트맵 연결해도 그런건가요?
다른 문제가 있는것 같기는 한데 어디 물어볼 곳도 없고...
미쳐 돌겠네요..ㅠㅠ
답변을 작성하시기 전에 로그인 해주세요.