페이지 색인 해결방법 부탁드립니다.
본문
페이지 색인 생성
페이지 색인이 생성됨
색인이 생성되었으나 robots.txt에 의해 차단됨
검색
Sitemaps
감지된 참조 사이트맵이 없습니다.
참조 페이지
감지된 페이지 없음
URL이 현재 보고되지 않은 다른 출처에서 알려져 있을 수 있습니다.
크롤링
최근 크롤링
2024. 11. 27. 오후 3:36:43
크롤링에 사용된 에이전트
Googlebot 스마트폰
크롤링 허용 여부
warning
아니요: robots.txt에 의해 차단됨
페이지 가져오기
warning
실패: robots.txt에 의해 차단됨
robots.txt는
User-agent:
* Allow: /
User-agent:
* Disallow: /ssadm
이렇게 되어 있습니다.
답변 1
User-agent:
* Allow: / //전체 허용하겟다.
User-agent:
* Disallow: /ssadm //이것만 차단하겟다.
/ /잘보시면 블록이 두번 선언 되잇는데 이는중복이 되므로 봇이 맛탱이갑니다. 이걸까 저걸까 몰르겟다 하겟지요~
User-agent: *
Allow: /
Disallow: /ssadm
답변을 작성하시기 전에 로그인 해주세요.
