엠

웹로봇 배제 표준

방법 1. 웹로봇 배제 표준(Robot Exclusion Standard)에 의한 방법

- 웹로봇의 수집과 검색노출을 원치 않는 경우, 우선 해당 웹페이지가 위치한 최상위 디렉토리에 아래의 내용이 포함된 robots.txt 파일을 저장하시기 바랍니다.
User-Agent:*
Disallow:/

만약 웹로봇이 방문한 이후에 robots.txt 의 로봇배제관련 표준이 적용되었다면, 검색결과에 적용되기까지는 다소 시간이 걸릴 수 있습니다. 자세한 로봇배제에 대한 표준은 www.robotstxt.org 를 통해 알 수 있습니다.

- 특정한 페이지에 대해 웹로봇의 색인이나 링크분석을 막고 싶은 때는 경우에 따라 아래와 같은 메타태그를 HTML 문서의 <HEAD> 부분에 추가하시면 됩니다.

웹페이지를 검색결과에 노출하고 싶지 않을 때
<META NAME="robots" CONTENT="noindex">


웹페이지 내에 포함된 링크를 따르는 수집도 막고 싶을 때 <META NAME="robots" CONTENT="noindex, nofollow"><div class='small'>[이 게시물은 관리자님에 의해 2011-10-31 17:16:08 PHP & HTML에서 이동 됨]</div>
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,187건
+
제목 글쓴이 날짜 조회
06-08-18 조회 2,936
06-08-18 조회 3,037
06-08-14 조회 2,474
06-08-13 조회 2,766
06-08-12 조회 3,906
06-08-12 조회 3,033
06-08-11 조회 4,252
06-08-11 조회 4,200
06-08-10 조회 3,295
06-08-10 조회 2,874
06-08-09 조회 3,921
06-08-08 조회 3,929
06-08-08 조회 5,182
06-08-08 조회 3,050
06-08-07 조회 3,785
06-08-06 조회 3,420
06-08-06 조회 4,545
06-08-05 조회 2,497
06-08-05 조회 2,565
06-08-05 조회 2,854
06-08-05 조회 3,328
06-08-05 조회 2,879
06-08-05 조회 2,809
06-08-04 조회 3,188
06-08-04 조회 3,328
06-08-04 조회 6,028
06-08-04 조회 3,424
06-08-04 조회 4,282
06-08-04 조회 3,725
06-08-03 조회 3,510
06-08-01 조회 5,777
06-07-31 조회 3,629
06-07-31 조회 3,460
06-07-30 조회 3,007
06-07-30 조회 2,787
06-07-29 조회 4,473
06-07-29 조회 3,432
06-07-28 조회 7,256
06-07-27 조회 3,186
06-07-26 조회 2,937
06-07-26 조회 3,807
06-07-26 조회 2,857
06-07-26 조회 3,351
06-07-25 조회 3,224
06-07-25 조회 4,652
06-07-25 조회 3,615
06-07-25 조회 3,821
06-07-24 조회 5,478
06-07-24 조회 4,718
06-07-23 조회 3,413
06-07-23 조회 5,498
06-07-22 조회 4,446
06-07-21 조회 5,263
06-07-21 조회 3,096
06-07-21 조회 3,291
06-07-21 조회 3,254
06-07-20 조회 4,411
06-07-20 조회 3,817
06-07-20 조회 4,572
06-07-20 조회 3,785
06-07-20 조회 3,616
06-07-20 조회 3,474
06-07-20 조회 3,310
06-07-20 조회 3,235
06-07-20 조회 5,375
06-07-20 조회 3,778
06-07-20 조회 3,299
06-07-20 조회 3,340
06-07-20 조회 3,970
06-07-19 조회 3,049
06-07-19 조회 4,386
06-07-19 조회 3,931
06-07-19 조회 3,389
06-07-19 조회 2,881
06-07-19 조회 3,311
06-07-19 조회 3,161
06-07-19 조회 3,004
06-07-19 조회 3,555
06-07-19 조회 3,403
06-07-19 조회 4,982
06-07-19 조회 4,844
06-07-19 조회 3,361
06-07-19 조회 4,384
06-07-19 조회 3,084
06-07-19 조회 3,515
06-07-19 조회 3,433
06-07-17 조회 3,438
06-07-17 조회 3,272
06-07-16 조회 3,868
06-07-14 조회 3,917
06-07-14 조회 4,320
06-07-14 조회 4,195
06-07-14 조회 3,801
06-07-13 조회 4,086
06-07-13 조회 4,266
06-07-12 조회 4,011
06-07-11 조회 3,716
06-07-11 조회 4,005
06-07-11 조회 5,641
06-07-11 조회 3,555