자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

+
제목 글쓴이 날짜 조회
12년 전 조회 653
12년 전 조회 1,364
12년 전 조회 1,398
12년 전 조회 711
12년 전 조회 1,436
12년 전 조회 1,995
12년 전 조회 1,504
12년 전 조회 1,545
12년 전 조회 1,270
12년 전 조회 711
12년 전 조회 732
12년 전 조회 2,571
12년 전 조회 758
12년 전 조회 589
12년 전 조회 1,050
12년 전 조회 1,179
12년 전 조회 1,128
12년 전 조회 798
12년 전 조회 2,133
12년 전 조회 2,360
12년 전 조회 1,247
12년 전 조회 815
12년 전 조회 2,457
12년 전 조회 7,719
12년 전 조회 2,192
12년 전 조회 938
12년 전 조회 1,309
12년 전 조회 1,056
12년 전 조회 2,280
12년 전 조회 1,963
12년 전 조회 725
12년 전 조회 933
12년 전 조회 1,939
12년 전 조회 1,128
12년 전 조회 912
12년 전 조회 575
12년 전 조회 1,245
12년 전 조회 961
12년 전 조회 1,874
12년 전 조회 878
12년 전 조회 892
12년 전 조회 1,373
12년 전 조회 770
12년 전 조회 868
12년 전 조회 1,321
12년 전 조회 1,253
12년 전 조회 1,282
12년 전 조회 1,440
12년 전 조회 862
12년 전 조회 1,049
12년 전 조회 1,097
12년 전 조회 688
12년 전 조회 1,131
12년 전 조회 806
12년 전 조회 885
12년 전 조회 545
12년 전 조회 1,274
12년 전 조회 1,565
12년 전 조회 590
12년 전 조회 535
12년 전 조회 1,499
12년 전 조회 582
12년 전 조회 1,166
12년 전 조회 965
12년 전 조회 1,396
12년 전 조회 1,476
12년 전 조회 6,176
12년 전 조회 1,492
12년 전 조회 726
12년 전 조회 568
12년 전 조회 607
12년 전 조회 694
12년 전 조회 944
12년 전 조회 1,569
12년 전 조회 1,068
12년 전 조회 1,323
12년 전 조회 573
12년 전 조회 664
12년 전 조회 2,666
12년 전 조회 1,749
12년 전 조회 1,467
12년 전 조회 3,314
12년 전 조회 714
12년 전 조회 2,486
12년 전 조회 2,062
12년 전 조회 1,902
12년 전 조회 1,980
12년 전 조회 927
12년 전 조회 1,482
12년 전 조회 1,480
12년 전 조회 950
12년 전 조회 3,320
12년 전 조회 625
12년 전 조회 1,115
12년 전 조회 1,529
12년 전 조회 1,939
12년 전 조회 791
12년 전 조회 1,494
12년 전 조회 870
12년 전 조회 2,444
🐛 버그신고