지

로봇.txt 파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

User-agent: Cowbot
Disallow:

User-agent:DAUMOA
Disallow:

User-agent:Googlebot
Disallow:

User-agent:Slurp
Disallow:

User-agent:MSNBot
Disallow:

User-agent: *
Disallow: /


로봇.txt  파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

댓글 5개

Disallow: / → 모든 로봇의 문서 접근을 전부 막는다(차단) 한다는 뜻입니다.
Allow: / → 모든 로봇의 문서 접근을 허용한다.

↓ 로봇.txt 파일을 아래처럼 수정하시면 모든로봇을 허용한다는 뜻 입니다.
-------------------
User-agent: *
Allow: /
-------------------
User-agent: *
Disallow: /
이렇게 넣어줬으니 로봇을 다허용한다는거 맞죠?
모두 차단 한다는 뜻인것 같은데용 ㅡㅡ;
Disallow => Allow 으로~
헐이런 큰실수가 너무 감사드립니다~~ 흑..
댓글을 작성하시려면 로그인이 필요합니다.

자유게시판

203,407건
+
제목 글쓴이 날짜 조회
13-04-26 조회 1,966
13-04-26 조회 1,500
13-04-25 조회 1,380
13-04-24 조회 1,247
13-04-23 조회 1,280
13-04-23 조회 1,324
13-04-23 조회 1,260
13-04-22 조회 1,228
13-04-22 조회 1,052
13-04-20 조회 1,377
13-04-20 조회 1,234
13-04-19 조회 1,257
13-04-18 조회 1,322
13-04-18 조회 1,253
13-04-17 조회 5,263
13-04-17 조회 1,286
13-04-17 조회 1,946
13-04-17 조회 1,332
13-04-17 조회 1,235
13-04-17 조회 1,507