로봇이 검색창에서 검색하는 메카니즘이 궁금해요
본문
제가 테스트 삼아서
제 사이트와 아무 관계없는 단어로 검색했던 검색어들을
로봇이 자꾸 검색해서 인기검색어에 올려놓을 때가 있습니다.
이건 로봇이 제 인기검색어 목록을 알고 있다는 얘기인데요.
신기한 것은 제가 이미 popular 테이블에서 삭제한 검색어인데도
로봇이 또 그 검색어로 검색을 한다는 것입니다.
이게 어떻게 가능한거죠?
로봇이 자기들의 기억 영역에서 기억하고 있는건가요?
아니면 제 사이트 어딘가에 흔적이 남아있어서 로봇이 그걸 읽는건가요?
제 쪽에 남는 흔적이라면 제어가 가능할 것 같은데
알려주시면 감사하겠습니다.
답변 2
바보를 검색하실때.. 웨브라우저에서 검색하셨습니까?
아니면 그누보드(또는 영카트)님의 사이트에서 검색하셨습니까?
일단 케시 삭제하기-관리자페이지에 있습니다 - 해보세요
웹브라우저에서 제 사이트에 접속해서 검색했습니다.
캐시삭제가 있군요. 한번 해보겠습니다. 감사합니다.
아, 그러면 혹시 누군가가 제 사이트의 캐시를 들쳐볼 수가 있는건가요?
캐시에 대한 개념도 잘 안 잡혀있어서 모르겠네요.
아... 그 방법으로도 해결이 안 되네요 ㅠㅠ
로봇들 자신들의 캐시도 있어서겠죠? ㅠㅠ
로봇이라면.. 구글 검색엔진을 말씀하시나요?
인기검색어라면 .. 그누보드 사이트에서 말씀하시나요?
로봇의 정의가 구글로봇이라면...
그누보드 인기검색어에 등록되어있는것은 구글 검색로봇이 아닐텐데요
혹시 구글로봇과... 그누보드의체크 프로그램과 혼돈하시는 것은 아니지요?
혼동하고 있는건지도 모르겠습니다.
접속자집계에 보면 os나 브라우저가 Robot이라고 되어있는 아이피를 로봇이라고 생각했는데요.
그게 다 로봇은 아닌건가요? 제가 잘 못 알고 있는 것이라면 알려주시구요.
더 중요한 것은,
어쨌든 인기검색어에 이를테면 제가 테스트를 위해 '바보'를 검색했다고 하면 솔직히 저같은 관리자나 테스트로 '바보'를
검색하지 일반 유저가 '바보'를 왜 검색하겠어요? ^^
어쨌든 그런 검색어가 인기검색어에 뜨는 것은 좋지 않으니까
'바보'를 인기검색어 리스트 또는 popular 테이블에서 삭제를 깨끗이 했습니다.
그런데 몇 시간 뒤에 보면 어라? '바보'가 다시 인기검색어에 올라있네요?
그 아이피를 접속자집계에서 확인해보면 언제나 os와 브라우저가 'Robot'이었습니다.
그래서 이런 일이 왜 일어나는지가 너무너무 궁금해서 잠이 안 와요.
제가 약간의 수정을 통해 쓸데없는 검색어가 인기검색어에 오르는 것은 어느 정도 막고는 있는데
어떻게 이미 지워진 검색어 목록들을 알아내서 검색을 하는지가 너무너무 궁금합니다.
