웹크롤링 구현중인데
서버측에 설치하는거 같은데
카페24에 호스팅 받고 있거든요.
설치방법 자세히 좀 알려주세요.
완전 초보라 생각하시고요.
|
답변 1개
채택된 답변
+20 포인트
드래곤된다
2015-01-19 (월) 10:52:03
일단
개인서버를 호스팅받으시거나 구축하시고 트래픽을 엄청나게 높이세요.
크롤링은 정보 수집목적으로 사용하는것이라 방문하는 모든 사이트를 복사해와요. 그에 대비하는 트래픽양을 가지고 계셔야하고 일반 호스팅에선 사용하실 수 없어요.
초보시라면 제일 문제되는게 트래픽입니다.
그리고 구현이 어느정도 되신건지 모르겠지만...
완전 초보라고 생각하라고 하셨으니 처음에는 설정을 최소치로 잡고 제한된 영역을 설정하시고 실행하세요.
오픈소스 그대로 시작하셨다간 디도스에 맞먹는 공격으로 오인할수 있습니다.
답변을 작성하려면 로그인이 필요합니다.