자동으로 글 퍼오는 것은 어떤 방식으로 구동되는 건가요?

가끔 어떤 사이트들을 보면 자동으로 글이 올라오더라구요. 
예를 들면 관련 뉴스라던가, 자동으로 꾸준히 생성되더라구요. 

어떻게 구현하는 건지 궁금하네요. 원리가 어떤건지..


|

댓글 3개

snoopy 나 curl 를 이용한 파싱 입니다.
원리는 대충 이렇습니다.
우선 먼저 file_get_contents() , curl 등 통해서 페이지를 불러 옵니다. 그다음 정규식 통해서 정리하여 디비에 올립니다.
한번 간단한거 만들어보면 재미있습니다.
하지만 우선 알아두셔야할것은 다른사람의 사이트에 정보을 동의 없이 수집하는 것은 도독에 어긋나는 일입니다.^^
xml 또는 json 같은 형태로 해당 서비스 업체에서 제공하기도 합니다.
댓글을 작성하시려면 로그인이 필요합니다. 로그인

프로그램

+
제목 글쓴이 날짜 조회
12년 전 조회 524
12년 전 조회 1,228
12년 전 조회 1,262
12년 전 조회 565
12년 전 조회 1,292
12년 전 조회 1,864
12년 전 조회 1,365
12년 전 조회 1,406
12년 전 조회 1,133
12년 전 조회 578
12년 전 조회 590
12년 전 조회 2,437
12년 전 조회 617
12년 전 조회 452
12년 전 조회 910
12년 전 조회 1,040
12년 전 조회 985
12년 전 조회 662
12년 전 조회 1,999
12년 전 조회 2,212
12년 전 조회 1,108
12년 전 조회 671
12년 전 조회 2,324
12년 전 조회 7,584
12년 전 조회 2,050
12년 전 조회 798
12년 전 조회 1,173
12년 전 조회 922
12년 전 조회 2,149
12년 전 조회 1,816
12년 전 조회 584
12년 전 조회 785
12년 전 조회 1,808
12년 전 조회 1,001
12년 전 조회 774
12년 전 조회 440
12년 전 조회 1,110
12년 전 조회 825
12년 전 조회 1,739
12년 전 조회 737
12년 전 조회 753
12년 전 조회 1,238
12년 전 조회 635
12년 전 조회 728
12년 전 조회 1,180
12년 전 조회 1,122
12년 전 조회 1,144
12년 전 조회 1,301
12년 전 조회 723
12년 전 조회 912
12년 전 조회 951
12년 전 조회 562
12년 전 조회 985
12년 전 조회 667
12년 전 조회 743
12년 전 조회 407
12년 전 조회 1,148
12년 전 조회 1,435
12년 전 조회 458
12년 전 조회 404
12년 전 조회 1,365
12년 전 조회 452
12년 전 조회 1,037
12년 전 조회 846
12년 전 조회 1,267
12년 전 조회 1,338
12년 전 조회 6,039
12년 전 조회 1,359
12년 전 조회 588
12년 전 조회 443
12년 전 조회 458
12년 전 조회 566
12년 전 조회 809
12년 전 조회 1,428
12년 전 조회 937
12년 전 조회 1,171
12년 전 조회 438
12년 전 조회 532
12년 전 조회 2,527
12년 전 조회 1,619
12년 전 조회 1,329
12년 전 조회 3,172
12년 전 조회 581
12년 전 조회 2,352
12년 전 조회 1,927
12년 전 조회 1,769
12년 전 조회 1,847
12년 전 조회 796
12년 전 조회 1,342
12년 전 조회 1,337
12년 전 조회 828
12년 전 조회 3,181
12년 전 조회 484
12년 전 조회 984
12년 전 조회 1,386
12년 전 조회 1,807
12년 전 조회 658
12년 전 조회 1,354
12년 전 조회 731
12년 전 조회 2,326
🐛 버그신고