엠

웹로봇 배제 표준

방법 1. 웹로봇 배제 표준(Robot Exclusion Standard)에 의한 방법

- 웹로봇의 수집과 검색노출을 원치 않는 경우, 우선 해당 웹페이지가 위치한 최상위 디렉토리에 아래의 내용이 포함된 robots.txt 파일을 저장하시기 바랍니다.
User-Agent:*
Disallow:/

만약 웹로봇이 방문한 이후에 robots.txt 의 로봇배제관련 표준이 적용되었다면, 검색결과에 적용되기까지는 다소 시간이 걸릴 수 있습니다. 자세한 로봇배제에 대한 표준은 www.robotstxt.org 를 통해 알 수 있습니다.

- 특정한 페이지에 대해 웹로봇의 색인이나 링크분석을 막고 싶은 때는 경우에 따라 아래와 같은 메타태그를 HTML 문서의 <HEAD> 부분에 추가하시면 됩니다.

웹페이지를 검색결과에 노출하고 싶지 않을 때
<META NAME="robots" CONTENT="noindex">


웹페이지 내에 포함된 링크를 따르는 수집도 막고 싶을 때 <META NAME="robots" CONTENT="noindex, nofollow"><div class='small'>[이 게시물은 관리자님에 의해 2011-10-31 17:16:08 PHP & HTML에서 이동 됨]</div>
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,187건
+
제목 글쓴이 날짜 조회
06-09-21 조회 3,696
06-09-21 조회 3,014
06-09-21 조회 3,247
06-09-21 조회 4,474
06-09-21 조회 3,128
06-09-21 조회 3,607
06-09-21 조회 3,706
06-09-21 조회 3,850
06-09-21 조회 4,064
06-09-21 조회 3,767
06-09-21 조회 4,240
06-09-21 조회 4,012
06-09-21 조회 4,676
06-09-20 조회 3,076
06-09-19 조회 3,943
06-09-18 조회 3,600
06-09-15 조회 3,205
06-09-15 조회 3,600
06-09-15 조회 3,037
06-09-15 조회 6,650
06-09-15 조회 3,450
06-09-13 조회 5,391
06-09-13 조회 3,511
06-09-11 조회 3,028
06-09-11 조회 3,721
06-09-11 조회 3,460
06-09-11 조회 3,679
06-09-11 조회 3,307
06-09-11 조회 5,034
06-09-11 조회 4,533
06-09-11 조회 3,336
06-09-11 조회 3,267
06-09-10 조회 3,159
06-09-06 조회 3,156
06-09-05 조회 5,496
06-09-04 조회 4,481
06-09-04 조회 3,900
06-09-03 조회 4,463
06-09-02 조회 4,099
06-09-02 조회 3,958
06-09-02 조회 3,550
06-09-01 조회 3,309
06-09-01 조회 3,629
06-09-01 조회 4,188
06-08-31 조회 3,189
06-08-31 조회 4,247
06-08-28 조회 4,380
06-08-27 조회 4,006
06-08-27 조회 3,099
06-08-27 조회 2,806
06-08-27 조회 3,434
06-08-27 조회 3,403
06-08-27 조회 2,736
06-08-27 조회 2,763
06-08-27 조회 2,667
06-08-27 조회 3,162
06-08-27 조회 2,733
06-08-27 조회 3,284
06-08-27 조회 3,051
06-08-27 조회 2,928
06-08-27 조회 2,749
06-08-27 조회 2,937
06-08-27 조회 3,006
06-08-27 조회 3,032
06-08-27 조회 3,771
06-08-27 조회 6,426
06-08-27 조회 2,829
06-08-27 조회 2,678
06-08-27 조회 2,501
06-08-27 조회 2,714
06-08-27 조회 2,643
06-08-27 조회 2,577
06-08-27 조회 2,590
06-08-27 조회 2,498
06-08-27 조회 2,567
06-08-27 조회 4,023
06-08-27 조회 4,983
06-08-26 조회 6,346
06-08-26 조회 2,503
06-08-26 조회 5,661
06-08-25 조회 4,109
06-08-25 조회 2,651
06-08-24 조회 3,824
06-08-24 조회 4,755
06-08-24 조회 2,896
06-08-23 조회 4,949
06-08-23 조회 3,018
06-08-23 조회 4,864
06-08-23 조회 4,543
06-08-23 조회 5,277
06-08-23 조회 5,179
06-08-22 조회 2,962
06-08-22 조회 2,961
06-08-21 조회 5,420
06-08-20 조회 3,821
06-08-20 조회 3,699
06-08-19 조회 3,529
06-08-19 조회 3,095
06-08-18 조회 3,732
06-08-18 조회 3,267