지

로봇.txt 파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

· 2013-04-26 (금) 16:28:56 · 1472 · 5

User-agent: Cowbot
Disallow:

User-agent:DAUMOA
Disallow:

User-agent:Googlebot
Disallow:

User-agent:Slurp
Disallow:

User-agent:MSNBot
Disallow:

User-agent: *
Disallow: /


로봇.txt  파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

|

댓글 5개

2013-04-28 (일) 09:32:42
Disallow: / → 모든 로봇의 문서 접근을 전부 막는다(차단) 한다는 뜻입니다.
Allow: / → 모든 로봇의 문서 접근을 허용한다.

↓ 로봇.txt 파일을 아래처럼 수정하시면 모든로봇을 허용한다는 뜻 입니다.
-------------------
User-agent: *
Allow: /
-------------------
User-agent: *
Disallow: /
이렇게 넣어줬으니 로봇을 다허용한다는거 맞죠?
모두 차단 한다는 뜻인것 같은데용 ㅡㅡ;
Disallow => Allow 으로~
헐이런 큰실수가 너무 감사드립니다~~ 흑..
댓글을 작성하시려면 로그인이 필요합니다.

자유게시판

202,994건
+
제목 글쓴이 날짜 조회
13-04-30 조회 2,450
13-04-30 조회 1,213
13-04-29 조회 1,229
13-04-29 조회 1,195
13-04-29 조회 1,311
13-04-29 조회 1,233
13-04-26 조회 1,939
13-04-26 조회 1,473
13-04-25 조회 1,354
13-04-24 조회 1,221
13-04-23 조회 1,257
13-04-23 조회 1,302
13-04-23 조회 1,240
13-04-22 조회 1,205
13-04-22 조회 1,028
13-04-20 조회 1,356
13-04-20 조회 1,213
13-04-19 조회 1,235
13-04-18 조회 1,300
13-04-18 조회 1,232