로봇자동수집이 가능하게 이 파일올려보세요
본문
다들 아시겠지만 구글이나 네이버에서 로봇으로 웹페이지를 수집하는데요
수집이 가능하게 아래 파일을 root 폴더에 올려보세요.제가 이것을 늦게 알아서 말입니다.
해보니까 구글의 경우 1-2일 사이에 웹페이지 노출 빈도가 확늘어나는것을 느낍니다
User-agent: *
Allow: /
.txt 파일로 만들어 서버 index.html 또는 index.php와 같은 위치에 올리면 됩니다.
메모장으로 만들면됩니다.
답변을 작성하시기 전에 로그인 해주세요.