자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

+
제목 글쓴이 날짜 조회
12년 전 조회 796
12년 전 조회 1,496
12년 전 조회 1,537
12년 전 조회 846
12년 전 조회 1,575
12년 전 조회 2,123
12년 전 조회 1,645
12년 전 조회 1,661
12년 전 조회 1,409
12년 전 조회 852
12년 전 조회 861
12년 전 조회 2,690
12년 전 조회 894
12년 전 조회 731
12년 전 조회 1,175
12년 전 조회 1,320
12년 전 조회 1,268
12년 전 조회 923
12년 전 조회 2,266
12년 전 조회 2,477
12년 전 조회 1,380
12년 전 조회 949
12년 전 조회 2,590
12년 전 조회 7,847
12년 전 조회 2,296
12년 전 조회 1,075
12년 전 조회 1,447
12년 전 조회 1,176
12년 전 조회 2,409
12년 전 조회 2,089
12년 전 조회 854
12년 전 조회 1,061
12년 전 조회 2,080
12년 전 조회 1,241
12년 전 조회 1,047
12년 전 조회 701
12년 전 조회 1,357
12년 전 조회 1,087
12년 전 조회 2,008
12년 전 조회 1,023
12년 전 조회 1,026
12년 전 조회 1,501
12년 전 조회 900
12년 전 조회 997
12년 전 조회 1,462
12년 전 조회 1,387
12년 전 조회 1,418
12년 전 조회 1,579
12년 전 조회 1,008
12년 전 조회 1,182
12년 전 조회 1,236
12년 전 조회 828
12년 전 조회 1,250
12년 전 조회 934
12년 전 조회 1,011
12년 전 조회 679
12년 전 조회 1,414
12년 전 조회 1,698
12년 전 조회 721
12년 전 조회 669
12년 전 조회 1,626
12년 전 조회 715
12년 전 조회 1,308
12년 전 조회 1,111
12년 전 조회 1,532
12년 전 조회 1,607
12년 전 조회 6,305
12년 전 조회 1,630
12년 전 조회 874
12년 전 조회 720
12년 전 조회 750
12년 전 조회 835
12년 전 조회 1,087
12년 전 조회 1,713
12년 전 조회 1,213
12년 전 조회 1,449
12년 전 조회 706
12년 전 조회 818
12년 전 조회 2,802
12년 전 조회 1,889
12년 전 조회 1,624
12년 전 조회 3,446
12년 전 조회 852
12년 전 조회 2,621
12년 전 조회 2,197
12년 전 조회 2,044
12년 전 조회 2,125
12년 전 조회 1,066
12년 전 조회 1,630
12년 전 조회 1,625
12년 전 조회 1,075
12년 전 조회 3,474
12년 전 조회 764
12년 전 조회 1,252
12년 전 조회 1,661
12년 전 조회 2,084
12년 전 조회 928
12년 전 조회 1,635
12년 전 조회 999
12년 전 조회 2,552