사이트의 robots.txt 파일, 메타 로봇 태그, X-Robots-Tag HTTP 헤더를 분석하여 Google 봇과 AI 크롤러가 귀하의 웹사이트에 액세스할 수 있는지 즉시 확인할 수 있는 온라인 도구입니다.
https://crawlercheck.com/
웹학교 컨텐츠몰, 웹학교블로그
By 웹학교