로봇.txt 파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

User-agent: Cowbot
Disallow:

User-agent:DAUMOA
Disallow:

User-agent:Googlebot
Disallow:

User-agent:Slurp
Disallow:

User-agent:MSNBot
Disallow:

User-agent: *
Disallow: /


로봇.txt  파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

|

댓글 5개

Disallow: / → 모든 로봇의 문서 접근을 전부 막는다(차단) 한다는 뜻입니다.
Allow: / → 모든 로봇의 문서 접근을 허용한다.

↓ 로봇.txt 파일을 아래처럼 수정하시면 모든로봇을 허용한다는 뜻 입니다.
-------------------
User-agent: *
Allow: /
-------------------
User-agent: *
Disallow: /
이렇게 넣어줬으니 로봇을 다허용한다는거 맞죠?
모두 차단 한다는 뜻인것 같은데용 ㅡㅡ;
Disallow => Allow 으로~
헐이런 큰실수가 너무 감사드립니다~~ 흑..
댓글을 작성하시려면 로그인이 필요합니다.

자유게시판

+
제목 글쓴이 날짜 조회
12년 전 조회 1,030
12년 전 조회 1,178
12년 전 조회 2,388
12년 전 조회 1,115
12년 전 조회 1,671
12년 전 조회 1,219
12년 전 조회 1,081
12년 전 조회 2,340
12년 전 조회 1,094
12년 전 조회 1,102
12년 전 조회 1,062
12년 전 조회 1,194
12년 전 조회 1,117
12년 전 조회 1,832
12년 전 조회 1,346
12년 전 조회 1,230
12년 전 조회 1,101
12년 전 조회 1,147
12년 전 조회 1,193
12년 전 조회 1,127
12년 전 조회 1,096
12년 전 조회 913
12년 전 조회 1,239
12년 전 조회 1,121
12년 전 조회 1,107
12년 전 조회 1,189
12년 전 조회 1,113
12년 전 조회 5,117
12년 전 조회 1,140
12년 전 조회 1,813