안녕하세요 질문좀요
본문
aws 아미나 이용중인데요
구글서치에서 색인등록 하고 했는데
갑자기 다음날에 구글봇이 엄청나게 들어와서 웹서버가 과부하가 되고
트래픽까지 엄청나게 초과 되었는데
또 구글봇을 robots.txt 차단함녀 검색 노출이 안된다고 해서요
좋은 방법이 없을까요?
답변 2
저도 궁금하네요
구글봇이 아니고 구글봇을 사칭한것이지 아닌가 궁금하네요
구글 크롤링 속도를 낮추시면 도움이 될겁니다.
https://developers.google.com/search/docs/crawling-indexing/reduce-crawl-rate?hl=ko
답변을 작성하시기 전에 로그인 해주세요.