이전
목록
다음
키

햐... Microsoft의 검색로봇 크롤러 정말 너무하네요.

키스
프로필 보기이 회원 글보기이 회원의 댓글보기
 · 2022-09-28 (수) 09:18:24 · 1572 · 2

Microsoft의 Bing 검색로봇이 들어와서 크롤링할 때

제가 운영하는 사이트 DB에 검색키워드가 잔뜩 쌓이는데요... 

 

검색키워드가 ê·¸ëˆ„ë³´ë“œ, 당혹사3, ê²°ê³¼, œëª©ë‚´ìš©, 쿼리 이런 것들인데

(저런 문자를 뭐라고 불러야 할지 모르겠으나) 하루에도 수백 개씩 쌓입니다. 

 

어차피 관리자 페이지에서 얼마후 자동삭제를 할 수 있지만,

짜증나는 건 사이트 내의 인기검색어를 얘들이 도배한다는 거죠.

 

Microsoft의 검색로봇을 아예 차단하자니 빙의 검색 유입이 꽤 있어서 그러지도 못하겠고...

이러지도 저러지도 못하고 있습니다. 그냥 차단 박아버릴까요? ㅠ.ㅠ

|

댓글 2개

그그들보드
프로필 보기이 회원 글보기이 회원의 댓글보기
 2022-09-28 (수) 11:39:42
한글이 깨진 인코딩 문제인것 같습니다

검색해보니 참고할만한 블로그가 있었습니다~ 제블로그 아님~

https://m.blog.naver.com/mankeys/221403271742
키키스
프로필 보기이 회원 글보기이 회원의 댓글보기
 2022-09-28 (수) 14:30:48
@그들보드 : 댓글 감사합니다. 저도 디코딩을 해 본 적 있는데, 한글 변환도 안되더라구요... ㅜ.ㅜ
댓글을 작성하시려면 로그인이 필요합니다.

정치/경제/사회

2,204건

가장 마지막에 업데이트 된 댓글의 글 부터 노출됩니다.

+
제목 글쓴이 날짜 조회
22-10-07 조회 1,662
22-10-05 조회 1,448
22-10-05 조회 1,378
22-10-05 조회 1,784
22-10-04 조회 1,814
22-10-04 조회 1,468
22-10-02 조회 1,454
22-09-30 조회 1,685
22-09-29 조회 1,602
22-09-29 조회 1,499
22-09-29 조회 1,737
22-09-29 조회 1,570
22-09-29 조회 1,445
22-09-28 조회 1,573
22-09-28 조회 1,458
22-09-23 조회 1,508
22-09-23 조회 1,387
22-09-23 조회 1,556
22-09-22 조회 1,666
22-09-21 조회 1,562
22-09-21 조회 1,792
22-09-20 조회 1,647
22-09-19 조회 1,450
22-09-16 조회 1,555
22-09-16 조회 1,787
22-09-15 조회 1,398
22-09-08 조회 1,571
22-09-05 조회 1,630
22-09-04 조회 1,436
22-09-03 조회 1,489
글쓰기