꾸

자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
+
제목 글쓴이 날짜 조회
16-07-13 조회 2,159
16-07-12 조회 2,324
16-07-12 조회 2,352
16-07-11 조회 2,184
16-06-05 조회 2,892
16-06-03 조회 3,000
16-05-26 조회 2,920
15-09-22 조회 4,969
15-06-10 조회 4,811
14-10-25 조회 6,342
14-10-22 조회 8,970
14-09-21 조회 5,773
14-09-16 조회 5,052
14-08-22 조회 1.1만
14-08-13 조회 5,886
14-08-12 조회 5,424
14-08-12 조회 6,278
14-08-11 조회 6,912
14-06-12 조회 6,187
14-06-11 조회 5,090
14-05-09 조회 5,403
14-05-09 조회 6,364
14-05-09 조회 6,391
14-05-08 조회 5,726
14-04-17 조회 4,728
14-04-16 조회 4,558
14-04-15 조회 4,567
14-04-15 조회 4,520
14-04-15 조회 4,286
14-04-14 조회 4,264
14-04-14 조회 4,231
14-04-14 조회 4,615
14-04-14 조회 4,761
14-04-14 조회 4,746
14-04-13 조회 4,643
14-04-12 조회 4,208
14-04-12 조회 4,355
14-04-12 조회 4,464
14-04-11 조회 4,993
14-04-10 조회 4,721
14-04-10 조회 4,763
14-04-09 조회 4,913
14-04-09 조회 5,279
14-04-08 조회 6,944
13-10-30 조회 7,645
13-07-11 조회 5,107
13-03-28 조회 1.1만
13-02-27 조회 6,765
13-02-14 조회 5,580
13-01-10 조회 4,502
12-12-31 조회 5,074
12-12-20 조회 6,096
12-12-12 조회 5,255
12-12-07 조회 4,476
12-11-28 조회 4,828
12-11-22 조회 5,261
12-11-12 조회 5,630
12-09-22 조회 4,496
12-09-18 조회 4,689