꾸

자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
+
제목 글쓴이 날짜 조회
16-06-11 조회 3,093
16-02-15 조회 3,327
16-02-02 조회 2,986
16-01-25 조회 2,604
16-01-18 조회 2,703
16-01-08 조회 2,625
16-01-07 조회 2,634
16-01-05 조회 2,672
16-01-05 조회 2,968
16-01-05 조회 2,942
16-01-05 조회 2,817
16-01-04 조회 2,680
16-01-04 조회 2,685
16-01-04 조회 2,635
16-01-04 조회 2,546
15-12-30 조회 2,907
15-12-24 조회 2,715
15-12-24 조회 2,711
15-12-24 조회 2,735
15-12-24 조회 2,693
15-12-23 조회 2,682
15-12-16 조회 2,774
15-12-15 조회 2,835
15-12-11 조회 2,966
15-12-10 조회 2,826
15-11-09 조회 2,803
15-11-09 조회 3,026
15-10-06 조회 3,358
15-10-02 조회 3,138
15-05-29 조회 4,470
15-02-02 조회 4,448
15-01-18 조회 4,441
14-10-25 조회 8,390
14-10-25 조회 5,173
14-10-22 조회 7,173
14-10-22 조회 4,876
14-10-22 조회 4,831
14-10-18 조회 5,698
14-10-17 조회 6,078
14-10-17 조회 5,457
14-10-17 조회 8,996
14-10-17 조회 6,474
14-10-13 조회 4,399
14-10-13 조회 4,498
14-10-07 조회 6,174
14-09-24 조회 3,941
14-09-23 조회 4,006
14-09-22 조회 4,923
14-09-22 조회 6,145
14-09-22 조회 4,109
14-09-22 조회 3,789
14-09-21 조회 4,417
14-09-21 조회 3,901
14-09-20 조회 3,898
14-09-20 조회 3,808
14-09-20 조회 3,980
14-09-19 조회 3,910
14-09-19 조회 4,067
14-09-19 조회 3,960
14-09-19 조회 4,327
14-09-19 조회 3,979
14-09-19 조회 3,908
14-09-19 조회 4,192
14-09-19 조회 3,930
14-09-19 조회 3,976
14-09-19 조회 3,957
14-09-18 조회 4,028
14-09-18 조회 3,991
14-09-18 조회 4,258
14-09-18 조회 4,230
14-09-18 조회 4,241
14-09-18 조회 4,936
14-09-18 조회 5,477
14-09-18 조회 5,367
14-09-18 조회 4,176
14-09-18 조회 4,672
14-09-18 조회 4,282
14-08-30 조회 5,546
14-08-06 조회 6,035
14-08-06 조회 5,648
14-08-03 조회 5,286
14-06-12 조회 5,558
14-05-11 조회 3,744
14-05-11 조회 4,507
14-05-11 조회 4,604
14-05-09 조회 1.3만
14-05-01 조회 5,206
14-03-30 조회 4,408
14-03-23 조회 8,036
14-02-12 조회 3,924
13-10-29 조회 7,870
13-10-28 조회 8,699
13-09-29 조회 6,667
13-09-29 조회 4,292
13-07-23 조회 5,170
13-07-23 조회 1.2만
13-07-14 조회 4,695
13-07-14 조회 5,086
13-07-14 조회 6,046
13-07-14 조회 5,328