구글로봇이 내 홈페이지에서 텍스트만 긁어가게 할 수있을까요? 이미지는 접근못하게.. 트래픽이 많이 걸려서요.
아래와 같이해도.. 트래픽이 많이 걸려서 ... 호스팅 비용이 너무 많이 나오네요.
조언 좀 부탁드립니다.
ai 때문에 엄청나게 접속해서 하루에 10기가 이상을 로봇 접근이 사용하네요.
robot.txt
User-agent: Googlebot-Image
Disallow: /
조언 좀 부탁드립니다.
ai 때문에 엄청나게 접속해서 하루에 10기가 이상을 로봇 접근이 사용하네요.
robot.txt
User-agent: Googlebot-Image
Disallow: /
|
댓글을 작성하시려면 로그인이 필요합니다.
댓글 5개
https://chatgpt.com/share/6a9a4975-6e90-83e9-a71b-589d67fc4b63
페이지의 내용은 가져가고 이미지는 긁어가지 못하게 하려면?
이런 답변을 주네요
User-agent: GPTBot
Disallow: /
# Anthropic (Claude) 차단
User-agent: ClaudeBot
Disallow: /
User-agent: Claude-Web
Disallow: /
# Perplexity 차단
User-agent: PerplexityBot
Disallow: /
# 기타 일반 AI 스크래퍼 차단
User-agent: CCBot
Disallow: /
User-agent: Bytespider
Disallow: /
이미지 도메인만 클라우드 플레어 cdn 사용 하면 트래픽 비용을 절감하면서도 SEO 를 유지할수 있습니다.
단순한 방법으로 차단으로는 요즘 robots.txt 를 무시하고 긁어가는 봇이 많아서 효과가 없을거에요.