꾸

자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
+
제목 글쓴이 날짜 조회
15-12-13 조회 2,528
15-12-13 조회 2,940
15-12-11 조회 2,602
15-12-11 조회 2,564
15-12-11 조회 2,565
15-12-10 조회 2,525
15-12-10 조회 2,583
15-12-10 조회 2,558
15-12-03 조회 3,202
15-12-03 조회 2,718
15-11-25 조회 2,796
15-11-09 조회 3,204
15-11-04 조회 2,967
15-06-09 조회 4,090
15-05-06 조회 5,085
15-03-28 조회 4,573
14-12-05 조회 4,996
14-10-25 조회 5,090
14-10-13 조회 4,269
14-10-03 조회 6,253
14-09-19 조회 4,960
14-09-18 조회 4,050
14-09-13 조회 4,611
14-09-03 조회 5,598
14-08-26 조회 4,205
14-08-26 조회 4,009
14-08-26 조회 3,977
14-08-11 조회 6,502
14-08-06 조회 4,125
14-08-06 조회 3,721
14-08-06 조회 3,933
14-08-01 조회 6,303
14-08-01 조회 3,842
14-07-30 조회 4,438
14-06-28 조회 5,161
14-06-28 조회 4,435
14-05-11 조회 4,588
14-05-09 조회 4,945
14-05-09 조회 7,706
14-04-30 조회 4,327
14-04-27 조회 4,191
14-04-25 조회 4,895
14-04-21 조회 3,873
14-04-21 조회 5,002
14-04-10 조회 4,600
14-04-01 조회 6,156
14-03-03 조회 3,531
14-02-25 조회 5,918
14-02-14 조회 5,194
14-02-13 조회 4,950
14-01-03 조회 4,441
13-12-06 조회 3,765
13-11-22 조회 5,521
13-11-18 조회 4,026
13-10-02 조회 4,447
13-10-02 조회 3,693
13-10-02 조회 3,957
13-10-02 조회 3,815
13-10-02 조회 4,182
13-09-16 조회 8,028
13-09-16 조회 5,393
13-08-18 조회 5,426
13-07-11 조회 4,059
13-07-10 조회 4,690
13-07-09 조회 4,728
13-07-09 조회 4,987
13-07-04 조회 4,485
13-07-04 조회 4,123
13-07-04 조회 4,238
13-07-01 조회 4,724
13-07-01 조회 4,555
13-07-01 조회 6,830
13-06-23 조회 4,377
13-06-05 조회 3,625
13-05-29 조회 4,868
13-05-10 조회 4,273
13-04-05 조회 4,890
13-04-05 조회 6,578
13-04-05 조회 1.1만
13-04-05 조회 7,173
13-04-05 조회 6,563
13-03-31 조회 5,834
13-03-31 조회 4,160
13-03-28 조회 4,522
13-03-28 조회 6,719
13-03-28 조회 9,196
13-03-28 조회 4,333
13-03-24 조회 3,949
13-03-21 조회 4,624
13-03-21 조회 1.8만
13-03-14 조회 3,933
13-03-10 조회 4,745
13-03-10 조회 4,505
13-03-10 조회 4,203
13-03-08 조회 5,258
13-03-08 조회 4,367
13-03-03 조회 5,023
13-03-03 조회 7,475
13-03-03 조회 4,217
13-03-03 조회 1.1만