꾸

자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
+
제목 글쓴이 날짜 조회
14-02-12 조회 3,901
14-02-12 조회 2,970
14-02-12 조회 2,637
14-02-11 조회 3,009
14-02-11 조회 3,115
14-02-11 조회 2,898
14-02-10 조회 5,973
14-02-09 조회 2,699
14-02-08 조회 2,692
14-02-07 조회 2,698
14-02-07 조회 6,836
14-02-06 조회 2,759
14-02-06 조회 3,190
14-02-05 조회 2,968
14-02-05 조회 2,847
14-02-05 조회 3,769
14-02-05 조회 3,652
14-02-04 조회 2,782
14-02-04 조회 3,563
14-02-02 조회 3,194
14-02-01 조회 2,883
14-01-31 조회 2,763
14-01-29 조회 3,663
14-01-29 조회 3,139
14-01-29 조회 3,775
14-01-28 조회 4,810
14-01-28 조회 2,688
14-01-27 조회 2,958
14-01-27 조회 3,059
14-01-27 조회 5,565
14-01-27 조회 3,240
14-01-26 조회 3,753
14-01-25 조회 3,198
14-01-24 조회 2,745
14-01-24 조회 2,902
14-01-24 조회 3,636
14-01-22 조회 2,843
14-01-22 조회 2,998
14-01-22 조회 4,210
14-01-22 조회 3,602
14-01-22 조회 3,415
14-01-22 조회 3,405
14-01-21 조회 3,239
14-01-21 조회 3,294
14-01-20 조회 3,137
14-01-20 조회 3,539
14-01-20 조회 2,722
14-01-20 조회 2,966
14-01-19 조회 2,904
14-01-19 조회 3,470
14-01-18 조회 2,681
14-01-18 조회 3,349
14-01-16 조회 3,342
14-01-16 조회 2,562
14-01-16 조회 3,421
14-01-15 조회 4,002
14-01-15 조회 3,488
14-01-15 조회 3,696
14-01-14 조회 3,160
14-01-14 조회 2,531
14-01-13 조회 2,574
14-01-10 조회 4,833
14-01-10 조회 2,671
14-01-09 조회 2,447
14-01-09 조회 3,035
14-01-07 조회 3,063
14-01-07 조회 3,043
14-01-07 조회 2,830
14-01-06 조회 4,146
14-01-03 조회 4,454
14-01-03 조회 3,129
14-01-03 조회 2,696
14-01-03 조회 4,623
14-01-03 조회 1만
14-01-03 조회 4,340
14-01-02 조회 2,813
14-01-02 조회 3,258
13-12-27 조회 3,049
13-12-27 조회 4,169
13-12-27 조회 4,019
13-12-27 조회 2,591
13-12-27 조회 2,824
13-12-26 조회 3,984
13-12-24 조회 3,252
13-12-20 조회 2,854
13-12-20 조회 2,521
13-12-19 조회 3,291
13-12-19 조회 3,062
13-12-18 조회 3,765
13-12-18 조회 2,751
13-12-18 조회 2,771
13-12-17 조회 3,380
13-12-13 조회 2,844
13-12-12 조회 2,818
13-12-11 조회 3,279
13-12-10 조회 3,169
13-12-09 조회 3,298
13-12-09 조회 3,641
13-12-09 조회 2,806
13-12-08 조회 2,982