robots.txt 는 어느 폴더에 넣는건가요..
본문
네이버 사이트등록하고 웹문서에 글이전혀 뜨질않아 찾아보니
네이버 웹마스터도구에서 robots.txt가 없다고해서 다운받았는데 어느폴더에 넣어야 하는지 모르겠습니다..
그리고 계정에 robots.txt을 넣기만하면 로봇이 게시물을 수집해가나요
답변 3
루트폴더, index 파일이 있는 가장 상위 위치에 넣어야 합니다.
그리고 네이버에 정상적으로 등록해 놓으셨다면 robots.txt 파일이 없어도 수집해 갑니다.
전 robots.txt 파일을 전혀 세팅하지 않았습니다. 그래도 알아서 다 수집해서 등록됩니다.
며칠 더 지켜보세요. 신디케이션도 연동하시고 글을 매일 몇 개씩이라도 작성해보시고요.
ftp 처음에 접속하면 나오는 루트폴더에 파일을 두면 자동으로 그 홈페이지의 내용 노출여부를 검사해서 처리합니다.
구글, 네이버 기타등등 , 여러곳에서 검색되길 원하신다면
작은별 말씀데로 robots.txt 파일 없어도 됩니다.
단지, 웹마스터 도구에 robots.txt 등록안했을경우 미등록이라고 표기되는것뿐입니다.
robots.txt 파일은
구글에서만 검색을 허용한다거나
특정사이트에서 검색이 안되게하고싶을경우 주로 활용합니다.
답변을 작성하시기 전에 로그인 해주세요.