햐... Microsoft의 검색로봇 크롤러 정말 너무하네요. 정보
햐... Microsoft의 검색로봇 크롤러 정말 너무하네요.
본문
Microsoft의 Bing 검색로봇이 들어와서 크롤링할 때
제가 운영하는 사이트 DB에 검색키워드가 잔뜩 쌓이는데요...
검색키워드가 그누보드, 당혹사3, ê²°ê³¼, œëª©ë‚´ìš©, 쿼리 이런 것들인데
(저런 문자를 뭐라고 불러야 할지 모르겠으나) 하루에도 수백 개씩 쌓입니다.
어차피 관리자 페이지에서 얼마후 자동삭제를 할 수 있지만,
짜증나는 건 사이트 내의 인기검색어를 얘들이 도배한다는 거죠.
Microsoft의 검색로봇을 아예 차단하자니 빙의 검색 유입이 꽤 있어서 그러지도 못하겠고...
이러지도 저러지도 못하고 있습니다. 그냥 차단 박아버릴까요? ㅠ.ㅠ
공감
0
0
댓글 2개
@그들보드 : 댓글 감사합니다. 저도 디코딩을 해 본 적 있는데, 한글 변환도 안되더라구요... ㅜ.ㅜ
