페이지 색인 해결방법 부탁드립니다.

페이지 색인 해결방법 부탁드립니다.

QA

페이지 색인 해결방법 부탁드립니다.

본문

페이지 색인 생성

페이지 색인이 생성됨

색인이 생성되었으나 robots.txt에 의해 차단됨

검색

Sitemaps

감지된 참조 사이트맵이 없습니다.

참조 페이지

감지된 페이지 없음

URL이 현재 보고되지 않은 다른 출처에서 알려져 있을 수 있습니다.

크롤링

최근 크롤링

2024. 11. 27. 오후 3:36:43

크롤링에 사용된 에이전트

Googlebot 스마트폰

크롤링 허용 여부

warning

아니요: robots.txt에 의해 차단됨

페이지 가져오기

warning

실패: robots.txt에 의해 차단됨


robots.txt는 

User-agent:
* Allow: /

User-agent:
* Disallow: /ssadm

이렇게 되어 있습니다.

이 질문에 댓글 쓰기 :

답변 1

※ 뭐가 미심적어 그러십니까?

User-agent: * , 이 코드는 한 번만 작성하시고. 
"""
User-agent: *

Disallow: /ssadm/

Allow: /
""" 
크롤러가 방문하기까지 느긋이 기다리세요.

★ 색인이 님의 입맛대로 바로바로 적용이 되려면 ,

SEO 가이드에 규합해야 합니다. - 크롤러가 업그레드하지 않을 수도 있음.

색인하시려는 페이지 관련 이미지나 스타일 시트

"""/ssadm""" 이 폴더에 있지는 않은 지 ~~? 확인하세요.

> 이미지 크롤러는 택스트 크롤러보다 방문 주기가 깁니다.

 

★ 혹시, 프로젝트가 무한 루프에 감겨지는 연결이 있지는 않은 지 꼭 확인하세요.

  > 링크 중에 새탭으로 열지 않은 부분은 꼭 체크하세요. - 크롤링이 않됨

 

★ 최종적으로 문제가 없다는 확신이 되시면, (구글 서치콘솔 예시)

  > 색인 콘솔에서 수동으로 "URL 검사"를 시작하여,

    "실제 URL 테스트"를 하시고 완료되면,

    "크롤링된 페이지 보기"에서 정상으로 페이지가 load 되었는 지를 확인하세요.

 

※ 덧붙이자면, 

- 많은 이가 착각할 수 있는 부분이 있습니다.

"""
User-agent: *

Disallow: /ssadm/

Allow: /
""" 
이 부분에서 코드(규칙)의 순서를 생각하시는데,

> Allow와 Disallow 지시문의 우선 순위는 규칙의 순서가 아니라 명시성에 따라 결정됩니다.

 

https://support.google.com/webmasters/answer/7440203#submitted_and_indexed

답변을 작성하시기 전에 로그인 해주세요.
전체 126,916 | RSS
QA 내용 검색

회원로그인

(주)에스아이알소프트 / 대표:홍석명 / (06211) 서울특별시 강남구 역삼동 707-34 한신인터밸리24 서관 1404호 / E-Mail: admin@sir.kr
사업자등록번호: 217-81-36347 / 통신판매업신고번호:2014-서울강남-02098호 / 개인정보보호책임자:김민섭(minsup@sir.kr)
© SIRSOFT