엠

웹로봇 배제 표준

방법 1. 웹로봇 배제 표준(Robot Exclusion Standard)에 의한 방법

- 웹로봇의 수집과 검색노출을 원치 않는 경우, 우선 해당 웹페이지가 위치한 최상위 디렉토리에 아래의 내용이 포함된 robots.txt 파일을 저장하시기 바랍니다.
User-Agent:*
Disallow:/

만약 웹로봇이 방문한 이후에 robots.txt 의 로봇배제관련 표준이 적용되었다면, 검색결과에 적용되기까지는 다소 시간이 걸릴 수 있습니다. 자세한 로봇배제에 대한 표준은 www.robotstxt.org 를 통해 알 수 있습니다.

- 특정한 페이지에 대해 웹로봇의 색인이나 링크분석을 막고 싶은 때는 경우에 따라 아래와 같은 메타태그를 HTML 문서의 <HEAD> 부분에 추가하시면 됩니다.

웹페이지를 검색결과에 노출하고 싶지 않을 때
<META NAME="robots" CONTENT="noindex">


웹페이지 내에 포함된 링크를 따르는 수집도 막고 싶을 때 <META NAME="robots" CONTENT="noindex, nofollow"><div class='small'>[이 게시물은 관리자님에 의해 2011-10-31 17:16:08 PHP & HTML에서 이동 됨]</div>
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,187건
+
제목 글쓴이 날짜 조회
06-11-28 조회 6,503
06-11-27 조회 3,742
06-11-27 조회 4,673
06-11-27 조회 5,566
06-11-25 조회 3,809
06-11-24 조회 3,757
06-11-22 조회 5,420
06-11-21 조회 4,039
06-11-18 조회 4,261
06-11-15 조회 3,480
06-11-15 조회 3,509
06-11-11 조회 3,243
06-11-10 조회 4,649
06-11-04 조회 3,375
06-10-29 조회 4,029
06-10-29 조회 3,027
06-10-24 조회 6,547
06-10-17 조회 4,860
06-10-17 조회 5,615
06-10-16 조회 4,358
06-10-16 조회 3,807
06-10-15 조회 5,174
06-10-13 조회 3,893
06-10-13 조회 4,256
06-10-13 조회 4,218
06-10-12 조회 5,409
06-10-12 조회 4,376
06-10-12 조회 4,325
06-10-12 조회 4,886
06-10-10 조회 4,200
06-10-10 조회 3,442
06-10-10 조회 3,492
06-10-10 조회 3,431
06-10-09 조회 4,050
06-10-04 조회 3,814
06-10-02 조회 4,594
06-10-01 조회 4,502
06-09-29 조회 3,082
06-09-29 조회 3,988
06-09-27 조회 9,083
06-09-27 조회 3,721
06-09-26 조회 4,392
06-09-26 조회 4,102
06-09-26 조회 4,255
06-09-26 조회 3,434
06-09-26 조회 3,694
06-09-26 조회 5,392
06-09-26 조회 3,504
06-09-26 조회 5,504
06-09-26 조회 3,621
06-09-26 조회 3,326
06-09-26 조회 3,553
06-09-26 조회 3,103
06-09-26 조회 3,679
06-09-26 조회 3,480
06-09-26 조회 4,395
06-09-26 조회 3,074
06-09-26 조회 4,768
06-09-25 조회 3,980
06-09-25 조회 4,749
06-09-25 조회 4,683
06-09-25 조회 4,429
06-09-25 조회 6,668
06-09-23 조회 3,370
06-09-23 조회 3,473
06-09-23 조회 3,508
06-09-23 조회 4,602
06-09-22 조회 5,027
06-09-22 조회 4,962
06-09-22 조회 3,592
06-09-22 조회 3,745
06-09-22 조회 3,937
06-09-22 조회 4,371
06-09-22 조회 3,819
06-09-22 조회 3,956
06-09-22 조회 3,768
06-09-22 조회 3,567
06-09-22 조회 4,605
06-09-22 조회 4,604
06-09-22 조회 4,316
06-09-21 조회 6,130
06-09-21 조회 3,921
06-09-21 조회 4,644
06-09-21 조회 4,373
06-09-21 조회 3,305
06-09-21 조회 4,376
06-09-21 조회 3,027
06-09-21 조회 3,493
06-09-21 조회 3,576
06-09-21 조회 5,229
06-09-21 조회 4,348
06-09-21 조회 4,313
06-09-21 조회 3,751
06-09-21 조회 3,209
06-09-21 조회 2,732
06-09-21 조회 3,649
06-09-21 조회 3,482
06-09-21 조회 2,930
06-09-21 조회 2,971
06-09-21 조회 3,849