[긴급]PHP 원격 코드 실행 취약점 안내
이전
목록
다음
엠

웹로봇 배제 표준

CLUB
프로필 보기게시판 작성글 보기전체 작성글 보기전체 댓글 보기
 · 2006-12-15 (금) 12:27:10 · 3190
방법 1. 웹로봇 배제 표준(Robot Exclusion Standard)에 의한 방법

- 웹로봇의 수집과 검색노출을 원치 않는 경우, 우선 해당 웹페이지가 위치한 최상위 디렉토리에 아래의 내용이 포함된 robots.txt 파일을 저장하시기 바랍니다.
User-Agent:*
Disallow:/

만약 웹로봇이 방문한 이후에 robots.txt 의 로봇배제관련 표준이 적용되었다면, 검색결과에 적용되기까지는 다소 시간이 걸릴 수 있습니다. 자세한 로봇배제에 대한 표준은 www.robotstxt.org 를 통해 알 수 있습니다.

- 특정한 페이지에 대해 웹로봇의 색인이나 링크분석을 막고 싶은 때는 경우에 따라 아래와 같은 메타태그를 HTML 문서의 <HEAD> 부분에 추가하시면 됩니다.

웹페이지를 검색결과에 노출하고 싶지 않을 때
<META NAME="robots" CONTENT="noindex">


웹페이지 내에 포함된 링크를 따르는 수집도 막고 싶을 때 <META NAME="robots" CONTENT="noindex, nofollow"><div class='small'>[이 게시물은 관리자님에 의해 2011-10-31 17:16:08 PHP & HTML에서 이동 됨]</div>
#퍼블리셔팁 #퍼블리셔 #팁자료실 #html
|
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
태그 필터 (최대 3개) 전체 개발자 소스 기타 mysql 팁자료실 javascript php linux flash 정규표현식 jquery node.js mobile 웹서버 os 프로그램 강좌 썸네일 이미지관련 도로명주소 그누보드5 기획자 견적서 계약서 기획서 마케팅 제안서 seo 통계 서식 통계자료 퍼블리셔 html css 반응형 웹접근성 퍼블리싱 표준화 반응형웹 홈페이지기초 부트스트랩 angularjs 포럼 스크린리더 센스리더 개발자톡 개발자팁 퍼블리셔톡 퍼블리셔팁 기획자톡 기획자팁 프로그램강좌 퍼블리싱강좌
+
제목 글쓴이 날짜 조회
07-10-13 조회 5,155
07-10-03 조회 4,129
07-10-03 조회 3,334
07-10-03 조회 2,575
07-10-03 조회 4,648
07-10-02 조회 2,991
07-10-01 조회 3,622
07-09-28 조회 3,526
07-09-27 조회 4,590
07-08-16 조회 6,433
07-08-04 조회 2,881
07-07-25 조회 6,154
07-07-05 조회 4,036
07-07-02 조회 4,579
07-06-30 조회 4,477
07-06-20 조회 7,368
07-06-20 조회 3,979
07-06-05 조회 4,154
07-05-26 조회 3,199
07-05-17 조회 9,189
07-05-17 조회 5,236
07-05-04 조회 6,150
07-04-15 조회 6,237
07-04-13 조회 4,027
07-04-11 조회 3,429
07-03-20 조회 3,596
07-03-02 조회 6,813
07-02-27 조회 6,085
07-02-22 조회 4,493
07-01-30 조회 6,315
07-01-30 조회 1만
06-12-20 조회 3,804
06-12-18 조회 4,650
06-12-15 조회 4,610
06-12-15 조회 3,843
06-12-15 조회 3,246
06-11-30 조회 3,681
06-11-27 조회 4,574
06-10-24 조회 6,480
06-10-17 조회 4,791
06-09-22 조회 4,537
06-09-21 조회 6,031
06-09-21 조회 3,950
06-09-15 조회 6,577
06-08-20 조회 3,726
06-07-19 조회 3,364
06-07-14 조회 4,263
06-07-14 조회 4,122
06-07-11 조회 5,733
06-06-08 조회 4,311
06-06-08 조회 4,218
06-05-24 조회 3,536
06-05-24 조회 4,917
06-05-17 조회 3,636
06-05-16 조회 4,387
06-05-14 조회 6,078
06-05-12 조회 3,652
06-05-06 조회 4,285
06-05-06 조회 4,360
06-05-06 조회 3,674
06-05-06 조회 3,742
06-05-06 조회 4,189
06-04-25 조회 4,052
06-03-23 조회 5,518
06-01-20 조회 4,090
06-01-04 조회 4,301
05-12-30 조회 4,172
05-12-21 조회 4,852
05-11-09 조회 4,057
05-11-09 조회 3,833
05-10-09 조회 3,479
05-09-21 조회 6,871
05-08-14 조회 4,360
05-08-04 조회 5,541
05-07-14 조회 4,606
05-06-15 조회 5,012
05-04-23 조회 4,585
05-04-20 조회 5,049
05-04-19 조회 1.1만
05-04-19 조회 6,012
05-03-15 조회 3,828
05-03-15 조회 4,272
05-03-13 조회 2,959
05-03-13 조회 3,470
05-03-13 조회 3,469
05-03-13 조회 2,763
05-03-13 조회 5,796
05-03-13 조회 5,428
05-03-13 조회 4,356
05-03-13 조회 4,656
05-03-13 조회 7,916
05-03-13 조회 4,418
05-03-13 조회 3,498
05-03-13 조회 3,493
05-03-13 조회 8,034
05-03-13 조회 5,503
05-03-13 조회 4,152
05-03-12 조회 3,803
05-03-12 조회 4,499
05-02-24 조회 4,649
글쓰기