|
|
|
16-07-13
|
조회 2,160
|
|
|
|
16-07-12
|
조회 2,332
|
|
|
|
16-07-12
|
조회 2,358
|
|
|
|
16-07-11
|
조회 2,185
|
|
|
|
16-06-05
|
조회 2,902
|
|
|
|
16-06-03
|
조회 3,009
|
|
|
|
16-05-26
|
조회 2,925
|
|
|
|
15-09-22
|
조회 4,978
|
|
|
|
15-06-10
|
조회 4,815
|
|
|
|
14-10-25
|
조회 6,349
|
|
|
|
14-10-22
|
조회 8,974
|
|
|
|
14-09-21
|
조회 5,776
|
|
|
|
14-09-16
|
조회 5,061
|
|
|
|
14-08-22
|
조회 1.1만
|
|
|
|
14-08-13
|
조회 5,894
|
|
|
|
14-08-12
|
조회 5,431
|
|
|
|
14-08-12
|
조회 6,284
|
|
|
|
14-08-11
|
조회 6,918
|
|
|
|
14-06-12
|
조회 6,192
|
|
|
|
14-06-11
|
조회 5,099
|
|
|
|
14-05-09
|
조회 5,409
|
|
|
|
14-05-09
|
조회 6,371
|
|
|
|
14-05-09
|
조회 6,397
|
|
|
|
14-05-08
|
조회 5,732
|
|
|
|
14-04-17
|
조회 4,734
|
|
|
|
14-04-16
|
조회 4,569
|
|
|
|
14-04-15
|
조회 4,572
|
|
|
|
14-04-15
|
조회 4,524
|
|
|
|
14-04-15
|
조회 4,291
|
|
|
|
14-04-14
|
조회 4,276
|
|
|
|
14-04-14
|
조회 4,241
|
|
|
|
14-04-14
|
조회 4,620
|
|
|
|
14-04-14
|
조회 4,764
|
|
|
|
14-04-14
|
조회 4,749
|
|
|
|
14-04-13
|
조회 4,648
|
|
|
|
14-04-12
|
조회 4,213
|
|
|
|
14-04-12
|
조회 4,361
|
|
|
|
14-04-12
|
조회 4,467
|
|
|
|
14-04-11
|
조회 4,999
|
|
|
|
14-04-10
|
조회 4,731
|
|
|
|
14-04-10
|
조회 4,765
|
|
|
|
14-04-09
|
조회 4,926
|
|
|
|
14-04-09
|
조회 5,289
|
|
|
|
14-04-08
|
조회 6,951
|
|
|
|
13-10-30
|
조회 7,649
|
|
|
|
13-07-11
|
조회 5,116
|
|
|
|
13-03-28
|
조회 1.1만
|
|
|
|
13-02-27
|
조회 6,773
|
|
|
|
13-02-14
|
조회 5,591
|
|
|
|
13-01-10
|
조회 4,507
|
|
|
|
12-12-31
|
조회 5,084
|
|
|
|
12-12-20
|
조회 6,104
|
|
|
|
12-12-12
|
조회 5,264
|
|
|
|
12-12-07
|
조회 4,485
|
|
|
|
12-11-28
|
조회 4,835
|
|
|
|
12-11-22
|
조회 5,270
|
|
|
|
12-11-12
|
조회 5,640
|
|
|
|
12-09-22
|
조회 4,501
|
|
|
|
12-09-18
|
조회 4,694
|
댓글 10개
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.