엠

웹로봇 배제 표준

방법 1. 웹로봇 배제 표준(Robot Exclusion Standard)에 의한 방법

- 웹로봇의 수집과 검색노출을 원치 않는 경우, 우선 해당 웹페이지가 위치한 최상위 디렉토리에 아래의 내용이 포함된 robots.txt 파일을 저장하시기 바랍니다.
User-Agent:*
Disallow:/

만약 웹로봇이 방문한 이후에 robots.txt 의 로봇배제관련 표준이 적용되었다면, 검색결과에 적용되기까지는 다소 시간이 걸릴 수 있습니다. 자세한 로봇배제에 대한 표준은 www.robotstxt.org 를 통해 알 수 있습니다.

- 특정한 페이지에 대해 웹로봇의 색인이나 링크분석을 막고 싶은 때는 경우에 따라 아래와 같은 메타태그를 HTML 문서의 <HEAD> 부분에 추가하시면 됩니다.

웹페이지를 검색결과에 노출하고 싶지 않을 때
<META NAME="robots" CONTENT="noindex">


웹페이지 내에 포함된 링크를 따르는 수집도 막고 싶을 때 <META NAME="robots" CONTENT="noindex, nofollow"><div class='small'>[이 게시물은 관리자님에 의해 2011-10-31 17:16:08 PHP & HTML에서 이동 됨]</div>
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,187건
+
제목 글쓴이 날짜 조회
07-03-09 조회 4,040
07-03-08 조회 4,526
07-03-08 조회 4,022
07-03-08 조회 2,894
07-03-08 조회 3,319
07-03-08 조회 4,933
07-03-08 조회 4,215
07-03-07 조회 4,198
07-03-07 조회 4,862
07-03-07 조회 3,367
07-03-06 조회 3,516
07-03-05 조회 4,464
07-03-05 조회 3,056
07-03-04 조회 3,442
07-03-04 조회 3,727
07-03-04 조회 2,947
07-03-04 조회 3,356
07-03-04 조회 3,141
07-03-03 조회 3,725
07-03-02 조회 3,129
07-03-02 조회 2,920
07-03-02 조회 2,961
07-03-02 조회 2,973
07-03-02 조회 3,975
07-03-02 조회 2,796
07-03-02 조회 6,872
07-03-01 조회 3,641
07-03-01 조회 2,841
07-03-01 조회 5,976
07-02-28 조회 3,262
07-02-27 조회 6,143
07-02-27 조회 4,442
07-02-26 조회 3,366
07-02-26 조회 3,043
07-02-26 조회 3,379
07-02-26 조회 3,005
07-02-26 조회 3,077
07-02-26 조회 3,133
07-02-25 조회 3,749
07-02-24 조회 4,854
07-02-24 조회 7,197
07-02-24 조회 5,050
07-02-23 조회 4,376
07-02-23 조회 3,428
07-02-23 조회 3,700
07-02-23 조회 3,445
07-02-23 조회 3,671
07-02-23 조회 3,630
07-02-22 조회 4,052
07-02-22 조회 3,876
07-02-22 조회 3,294
07-02-22 조회 4,572
07-02-21 조회 4,940
07-02-21 조회 5,127
07-02-21 조회 4,653
07-02-20 조회 4,715
07-02-19 조회 3,865
07-02-19 조회 3,762
07-02-19 조회 3,718
07-02-19 조회 3,582
07-02-19 조회 3,876
07-02-18 조회 5,160
07-02-17 조회 4,894
07-02-16 조회 3,354
07-02-15 조회 3,237
07-02-15 조회 2,793
07-02-14 조회 5,243
07-02-14 조회 7,122
07-02-14 조회 8,208
07-02-14 조회 3,862
07-02-12 조회 3,970
07-02-12 조회 5,449
07-02-12 조회 3,504
07-02-11 조회 4,883
07-02-10 조회 4,210
07-02-10 조회 4,099
07-02-10 조회 3,604
07-02-10 조회 3,858
07-02-09 조회 3,975
07-02-09 조회 4,473
07-02-08 조회 5,000
07-02-08 조회 4,637
07-02-04 조회 4,121
07-02-04 조회 3,654
07-02-03 조회 4,267
07-02-03 조회 4,352
07-02-02 조회 3,839
07-02-02 조회 3,661
07-02-02 조회 4,667
07-02-02 조회 6,349
07-02-02 조회 6,464
07-02-01 조회 3,682
07-01-31 조회 3,540
07-01-30 조회 6,410
07-01-30 조회 1만
07-01-29 조회 3,383
07-01-28 조회 6,292
07-01-27 조회 5,788
07-01-26 조회 3,927
07-01-26 조회 6,344