네이버 로봇이 관리자만 보는 글이나 비밀글을 긁어갈 수 있나요?
본문
관리자만 보는 레벨9의 글이나 비밀글로 된 것에 네이버 로봇이 접근한 웹로그가 있어서요.
125.209.235.178 - - [04/Mar/2018:05:35:33 +0900] "GET /b/text-800 HTTP/1.1" 200 6087 "-" "Mozilla/5.0 (compatible; Yeti/1.1; +http://naver.me/bot)" 0 44629
이런 식으로 나오는데 이 글을 읽은 건지 아니면 그냥 접근하려고만 한 건지 모르겠네요.
글주소가 축약형인 이유는 배추빌더를 사용해서 짧은 글주소를 써서 그렇습니다.
'text'가 테이블 명이고 관리자만 보는 레벨9의 게시판이고 글도 다 비밀글입니다.
아시는 분 계시면 답변을 부탁드립니다. 감사합니다.
답변 2
접근만 하려다가 실패하고 돌아간겁니다
감사합니다^^
추가적인 얘기로,
검색로봇에 대해 특정 디렉토리에 접근을 제한하고자 한다면,
루트디렉토리에 robots.txt 텍스트 파일을 생성한 뒤,
User-agent: *
Disallow: /adm/
[출처] 검색 로봇 차단하기 (robots.txt)|작성자 희동이
로 저장해 주면 됩니다.
답변을 작성하시기 전에 로그인 해주세요.