|
|
|
16-03-02
|
조회 3,256
|
|
|
|
16-01-19
|
조회 2,544
|
|
|
|
15-12-23
|
조회 2,966
|
|
|
|
15-12-08
|
조회 3,685
|
|
|
|
14-10-30
|
조회 5,744
|
|
|
|
14-06-06
|
조회 5,566
|
|
|
|
12-08-30
|
조회 3,925
|
|
|
|
12-08-20
|
조회 3,842
|
|
|
|
12-07-15
|
조회 5,172
|
|
|
|
12-07-13
|
조회 3,640
|
|
|
|
12-07-06
|
조회 3,869
|
|
|
|
12-06-27
|
조회 3,382
|
|
|
|
12-06-23
|
조회 3,590
|
|
|
|
12-05-03
|
조회 5,197
|
|
|
|
12-04-20
|
조회 4,132
|
|
|
|
12-03-29
|
조회 4,648
|
|
|
|
12-03-22
|
조회 4,755
|
|
|
|
12-03-22
|
조회 3,523
|
|
|
|
12-03-21
|
조회 3,300
|
|
|
|
12-03-11
|
조회 3,723
|
|
|
|
12-03-06
|
조회 4,273
|
|
|
|
12-02-22
|
조회 4,544
|
|
|
|
12-02-17
|
조회 3,344
|
|
|
|
12-02-17
|
조회 6,194
|
|
|
|
12-02-14
|
조회 6,147
|
|
|
|
12-02-06
|
조회 4,273
|
|
|
|
12-01-18
|
조회 3,225
|
|
|
|
12-01-06
|
조회 3,453
|
|
|
|
11-12-30
|
조회 3,924
|
|
|
|
11-12-30
|
조회 7,070
|
|
|
|
11-12-21
|
조회 3,291
|
|
|
|
11-12-21
|
조회 4,262
|
|
|
 똥싼너구리
|
11-12-16
|
조회 3,291
|
|
|
 관리자
|
11-12-15
|
조회 3,326
|
|
|
|
11-12-15
|
조회 3,435
|
|
|
|
11-12-15
|
조회 4,240
|
|
|
|
11-12-09
|
조회 3,245
|
|
|
|
11-12-09
|
조회 3,317
|
|
|
|
11-12-07
|
조회 2,882
|
|
|
|
11-12-07
|
조회 3,967
|
|
|
|
11-12-05
|
조회 4,421
|
|
|
|
11-12-02
|
조회 3,875
|
|
|
|
11-12-01
|
조회 2,745
|
|
|
|
11-12-01
|
조회 2,797
|
|
|
|
11-12-01
|
조회 2,780
|
댓글 10개
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.