robots.txt 질문
본문
User-agent: Yeti
Allow:/
이 상태로 txt 파일을 설정하면 <홈페이지주소.com/> 만 수집하게 하는건가요?
만약 각 게시판마다 수집을 허용하려면 전체 게시판에 전부 Allow 설정을 해주어야 하는건가요?
답변을 작성하시기 전에 로그인 해주세요.
User-agent: Yeti
Allow:/
이 상태로 txt 파일을 설정하면 <홈페이지주소.com/> 만 수집하게 하는건가요?
만약 각 게시판마다 수집을 허용하려면 전체 게시판에 전부 Allow 설정을 해주어야 하는건가요?