로봇.txt 파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

User-agent: Cowbot
Disallow:

User-agent:DAUMOA
Disallow:

User-agent:Googlebot
Disallow:

User-agent:Slurp
Disallow:

User-agent:MSNBot
Disallow:

User-agent: *
Disallow: /


로봇.txt  파일이요 이렇게 하면 모든 로봇 다 들어오는거 맞나요??

|

댓글 5개

Disallow: / → 모든 로봇의 문서 접근을 전부 막는다(차단) 한다는 뜻입니다.
Allow: / → 모든 로봇의 문서 접근을 허용한다.

↓ 로봇.txt 파일을 아래처럼 수정하시면 모든로봇을 허용한다는 뜻 입니다.
-------------------
User-agent: *
Allow: /
-------------------
User-agent: *
Disallow: /
이렇게 넣어줬으니 로봇을 다허용한다는거 맞죠?
모두 차단 한다는 뜻인것 같은데용 ㅡㅡ;
Disallow => Allow 으로~
헐이런 큰실수가 너무 감사드립니다~~ 흑..
댓글을 작성하시려면 로그인이 필요합니다.

자유게시판

+
제목 글쓴이 날짜 조회
12년 전 조회 1,030
12년 전 조회 1,181
12년 전 조회 2,390
12년 전 조회 1,116
12년 전 조회 1,671
12년 전 조회 1,219
12년 전 조회 1,083
12년 전 조회 2,342
12년 전 조회 1,095
12년 전 조회 1,104
12년 전 조회 1,065
12년 전 조회 1,194
12년 전 조회 1,118
12년 전 조회 1,832
12년 전 조회 1,349
12년 전 조회 1,234
12년 전 조회 1,101
12년 전 조회 1,148
12년 전 조회 1,196
12년 전 조회 1,129
12년 전 조회 1,098
12년 전 조회 918
12년 전 조회 1,243
12년 전 조회 1,124
12년 전 조회 1,111
12년 전 조회 1,191
12년 전 조회 1,117
12년 전 조회 5,119
12년 전 조회 1,142
12년 전 조회 1,815