robots.txt
본문
robots.txt
구글에 제 사이트를 검색하면은 글만 나오게 하고 싶은데 페이지.PHP등 잡다한 것들이 너무 많이 노출이 되어서요
글만 검색이되게 하는방법점요
답변 3
allow의 / 대산에 검색될 것들을 구체적으로 적으시면 됩니다.
Allow: /bbs/board.php
그리고 링크에 검색되지 않을 것들은 관계설정 rel="nofollow" 이렇게 해 주면 봇이 검색하지 않습니다.
<a href="/bbs/logout.php" rel="nofollow">로그아웃</a>
<a href="/bbs/login.php" rel="nofollow">로그아웃</a> 등
Allow: <a href="/bbs/logout.php" rel="nofollow"> 이렇게하면되나요?
User-agent: *
Allow: /bbs/board.php
Disallow: /bbs/login.php
Disallow: /bbs/logout.php
위와 같이 하면 됩니다...
rel="nofollow" 이 부분은 홈페이지에서 일일이 링크에 추가해 줘야 하는 것입니다.
robots.txt 에서 설정을 바꿔서 올리셔도 이게 반영되기까지 오랜시간이 걸립니다. 직접 잡다한 사이트들의 url을 취합하셔서 구글에 삭제 요청을 올려야 빠릅니다.
답변을 작성하시기 전에 로그인 해주세요.