조언을 구합니다. > 자유게시판

조언을 구합니다. 정보

조언을 구합니다.

샵삐 자기소개 아이디로 검색 회원게시물 (118.♡.♡.165)
2011.07.16 01:49:38
1,460

본문

취미삼아 프로그램을 하나 만들고있는중입니다.

프로그램의 주기능은 컨텐츠 수집입니다.

궁금한것은

1. 수집기능의 범위

사이트마다 소스가 다르니 파싱도 다를텐데

기존에 다른 개발자분들이 개발해놓은 프로그램들의 경우

고객이 원하는 사이트의 컨텐츠 수집은 어떻게 하는지 궁금하네요.

프로그램 판매 이후에 고객이 원하는 사이트를 추가해주는 방식일까요?

(RSS제외)

2. 자동실행

컨텐츠 수집프로그램을 주기적으로 실행하려면 크론이 필수적이지 않나요?

서버호스팅이라면 크론을 사용할수있겠지만..

웹호스팅을 사용하는 고객은 어떻게 자동실행을 하는지 궁금하네요

(방문자나 봇을 이용한 실행은 신뢰도가 떨어지므로 패스)

3. php , 크론 연동 참고서적 or 사이트

4. 컨텐츠 수집에 관한 참고서적 or 사이트

방문자는 하나도 없지만.. 앞으로 멋지게 좀 꾸며보려고

하나 만들어보려고 하는데.. ^^

지금은 단순히 스누피를 이용해서 특정사이트 내용을 긁어 DB,서버에 저장하는것까진 했는데

실력이 너무 떨어져서.. ^^; 진행이 잘 안되네요.....

댓글 4개

이게나야 자기소개 아이디로 검색 회원게시물

자기소개 아이디로 검색 회원게시물

(120.♡.♡.131)

11.07.16 23:04:31

모든 항목에 대한 답변은 안되겠지만

1번은 음...저도 몇번 파싱로봇만들어 봤었는데 기존에 개발해서 가지고 있는 것이 있다손 치더라도 수집하는 사이트가 기존것과 다르다면 파싱부분에 대한 것은 수집사이트 맞춰서 새로 짜야 한다고 봐야 합니다.
그래도 개발했던 소스가 있다면 접근하는 방식등 많은 부분은 그대로 쓰기 때문에 좀 손쉽게 추가 할수 있겠죠.

2번. 저도 클론으로 자동 실행 시켰었습니다.
얘기 하신것과 같이 클론설정을 할 수 있는 권한이 없다면 안되죠.
웹호스팅 인 경우엔 솔직히 자동 힘들다고 봐야 합니다.
클론 설정을 할수가 없으니깐요.
그렇다고 웹페이지 뛰어 놓고 자동 리플리쉬 시킨다는건 바보 같은 짓이죠.
서버 부하걸린다고 바로 호스팅업체에서 전화옵니다...ㅡㅡ''

3번,4번. 저같은 경우엔 PHP스쿨이나 php.net 등 php 전문커뮤니티 사이트에서 정보 얻어해서 공부했습니다.
제가 처음 파싱 할때 그 부분에 대한 전문 서적이 없었어서.

실력이 부족하더라도 꾸준히 시행착오 겪다보면 다 자기것 됩니다.
포기 하지 않는게 가장 중요하죠.
그래도 적으신 내용보니 나름 이것저것 많이 알아 보셨네요..ㅎㅎ
좋은 결과 있으시길 바래요..^&^&