자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다. 로그인

프로그램

+
제목 글쓴이 날짜 조회
12년 전 조회 512
12년 전 조회 1,212
12년 전 조회 1,251
12년 전 조회 550
12년 전 조회 1,282
12년 전 조회 1,849
12년 전 조회 1,347
12년 전 조회 1,388
12년 전 조회 1,115
12년 전 조회 566
12년 전 조회 572
12년 전 조회 2,425
12년 전 조회 604
12년 전 조회 439
12년 전 조회 896
12년 전 조회 1,028
12년 전 조회 971
12년 전 조회 652
12년 전 조회 1,984
12년 전 조회 2,202
12년 전 조회 1,094
12년 전 조회 660
12년 전 조회 2,307
12년 전 조회 7,572
12년 전 조회 2,035
12년 전 조회 787
12년 전 조회 1,158
12년 전 조회 907
12년 전 조회 2,135
12년 전 조회 1,800
12년 전 조회 570
12년 전 조회 772
12년 전 조회 1,795
12년 전 조회 982
12년 전 조회 762
12년 전 조회 428
12년 전 조회 1,096
12년 전 조회 809
12년 전 조회 1,727
12년 전 조회 727
12년 전 조회 739
12년 전 조회 1,222
12년 전 조회 625
12년 전 조회 715
12년 전 조회 1,167
12년 전 조회 1,111
12년 전 조회 1,131
12년 전 조회 1,283
12년 전 조회 712
12년 전 조회 900
12년 전 조회 937
12년 전 조회 549
12년 전 조회 976
12년 전 조회 657
12년 전 조회 735
12년 전 조회 394
12년 전 조회 1,134
12년 전 조회 1,426
12년 전 조회 441
12년 전 조회 390
12년 전 조회 1,352
12년 전 조회 443
12년 전 조회 1,023
12년 전 조회 829
12년 전 조회 1,254
12년 전 조회 1,327
12년 전 조회 6,028
12년 전 조회 1,347
12년 전 조회 575
12년 전 조회 428
12년 전 조회 449
12년 전 조회 553
12년 전 조회 795
12년 전 조회 1,418
12년 전 조회 923
12년 전 조회 1,160
12년 전 조회 425
12년 전 조회 519
12년 전 조회 2,515
12년 전 조회 1,611
12년 전 조회 1,320
12년 전 조회 3,159
12년 전 조회 567
12년 전 조회 2,339
12년 전 조회 1,913
12년 전 조회 1,758
12년 전 조회 1,833
12년 전 조회 784
12년 전 조회 1,329
12년 전 조회 1,326
12년 전 조회 819
12년 전 조회 3,169
12년 전 조회 474
12년 전 조회 974
12년 전 조회 1,369
12년 전 조회 1,790
12년 전 조회 647
12년 전 조회 1,342
12년 전 조회 717
12년 전 조회 2,317
🐛 버그신고