robots.txt 질문
User-agent: Yeti
Allow:/
이 상태로 txt 파일을 설정하면 <홈페이지주소.com/> 만 수집하게 하는건가요?
만약 각 게시판마다 수집을 허용하려면 전체 게시판에 전부 Allow 설정을 해주어야 하는건가요?
|
답변 1개
2021-01-19 (화) 17:44:01
답변을 작성하려면 로그인이 필요합니다.