SIR
J

웹 수집 로봇 만들고있는데...

JMoon
프로필 보기이 회원 글보기이 회원의 댓글보기
 · 12년 전 · 1721 · 8
 
개인적인 용도로 수집봇을 제작하고 있습니다 ㅎㅎ;;
 
데이터가 3만건이 넘어가니 검색 속도가 엄청 느려지네요...
 
무슨 방법이 없으련지 ㅋㅋ;;;;;;;;;;
 
 
그래도 데이터 모이는 속도는 맘에 드네요^^;
|
글쓰기

댓글 8개

카카이루
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
검색어 : 그누보드
뉴스(0 개)
웹문서(0 개)
블로그(0 개)
동영상(0 개)
이미지(0 개)

그누에 대한건 암것도 없네요
JJMoon
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
그누보드도 수집 시킬까요 ㅋㅋ;;;;;;
당일 인기검색어를 기준으로 수집을 해서 ㅎㅎ
카카이루
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
성인동영상
검색어 : 성인동영상
뉴스(0 개)
웹문서(0 개)
블로그(0 개)
동영상(0 개)
이미지(0 개)

검색해서 나오는게 암것도 없네요 ㅎㅎㅎ
JJMoon
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
당일 인기검색어에 성인동영상이 있을리가 ㅎㅎ;;;;;;

http://search.mooncp.net/search/search.php?stx=%EA%B9%80%EC%97%B0%EC%95%84

http://search.mooncp.net/search/search.php?stx=%EC%A1%B0%ED%8E%B8%EC%84%B1

http://search.mooncp.net/search/search.php?stx=%EA%B0%A4%EB%9F%AD%EC%8B%9C
ggamjapower
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
lucene이라는 오픈소스 검색엔진을 사용하시면 됩니다.
좀더 사용하기 쉽게 만든것이 solr 또는 elasticsearch 이런것도 있습니다.
JJMoon
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
직접 최적화랑 엔진 개발을 하고 싶어서요...
컴컴퓨터매니아
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
구글 자체를 긁어가는건 어떨까요? 구글 안에는 외부 페이지 링크들이 많이 있자나요ㅎㅎ
JJMoon
프로필 보기이 회원 글보기이 회원의 댓글보기
 12년 전
구글 문서를 키워드별로 파싱 시키고 있습니다. ㅎㅎ
이전글목록다음글
댓글을 작성하시려면 로그인이 필요합니다. 로그인

자유게시판

+
제목 글쓴이 날짜 조회
12년 전 조회 1,099
12년 전 조회 1,103
12년 전 조회 1,333
12년 전 조회 1,091
12년 전 조회 1,272
12년 전 조회 1,100
12년 전 조회 3,201
12년 전 조회 1,104
12년 전 조회 1,153
12년 전 조회 1,407
12년 전 조회 1,095
12년 전 조회 1,100
12년 전 조회 3,562
12년 전 조회 1,254
12년 전 조회 1,722
12년 전 조회 1,077
12년 전 조회 2,173
12년 전 조회 1,388
12년 전 조회 4,745
12년 전 조회 1,200
12년 전 조회 3,375
12년 전 조회 1,095
12년 전 조회 1,199
12년 전 조회 1,412
12년 전 조회 1,157
12년 전 조회 1,105
12년 전 조회 1,124
12년 전 조회 1,375
12년 전 조회 1,733
12년 전 조회 1,104
이전 첫 페이지 다음
글쓰기
🐛 버그신고