자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다. 로그인

프로그램

+
제목 글쓴이 날짜 조회
12년 전 조회 495
12년 전 조회 1,199
12년 전 조회 1,233
12년 전 조회 535
12년 전 조회 1,265
12년 전 조회 1,832
12년 전 조회 1,332
12년 전 조회 1,381
12년 전 조회 1,103
12년 전 조회 553
12년 전 조회 561
12년 전 조회 2,410
12년 전 조회 591
12년 전 조회 426
12년 전 조회 879
12년 전 조회 1,013
12년 전 조회 959
12년 전 조회 637
12년 전 조회 1,970
12년 전 조회 2,185
12년 전 조회 1,080
12년 전 조회 643
12년 전 조회 2,297
12년 전 조회 7,561
12년 전 조회 2,028
12년 전 조회 770
12년 전 조회 1,146
12년 전 조회 890
12년 전 조회 2,122
12년 전 조회 1,786
12년 전 조회 556
12년 전 조회 760
12년 전 조회 1,777
12년 전 조회 974
12년 전 조회 745
12년 전 조회 411
12년 전 조회 1,085
12년 전 조회 799
12년 전 조회 1,714
12년 전 조회 712
12년 전 조회 724
12년 전 조회 1,212
12년 전 조회 611
12년 전 조회 699
12년 전 조회 1,154
12년 전 조회 1,096
12년 전 조회 1,115
12년 전 조회 1,268
12년 전 조회 695
12년 전 조회 885
12년 전 조회 924
12년 전 조회 532
12년 전 조회 962
12년 전 조회 642
12년 전 조회 721
12년 전 조회 382
12년 전 조회 1,121
12년 전 조회 1,408
12년 전 조회 428
12년 전 조회 377
12년 전 조회 1,341
12년 전 조회 427
12년 전 조회 1,012
12년 전 조회 818
12년 전 조회 1,240
12년 전 조회 1,312
12년 전 조회 6,016
12년 전 조회 1,331
12년 전 조회 557
12년 전 조회 413
12년 전 조회 436
12년 전 조회 537
12년 전 조회 780
12년 전 조회 1,400
12년 전 조회 911
12년 전 조회 1,144
12년 전 조회 411
12년 전 조회 507
12년 전 조회 2,498
12년 전 조회 1,593
12년 전 조회 1,303
12년 전 조회 3,143
12년 전 조회 553
12년 전 조회 2,327
12년 전 조회 1,901
12년 전 조회 1,741
12년 전 조회 1,819
12년 전 조회 769
12년 전 조회 1,313
12년 전 조회 1,310
12년 전 조회 805
12년 전 조회 3,154
12년 전 조회 456
12년 전 조회 956
12년 전 조회 1,359
12년 전 조회 1,779
12년 전 조회 635
12년 전 조회 1,328
12년 전 조회 703
12년 전 조회 2,314
🐛 버그신고