이전
목록
다음
축

웹 소스 긁어오기

축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 · 2012-09-04 (화) 13:37:08 · 7514 · 14
<?
function open_url($url)
{
if (preg_match('/^(https?)\:\/\/([^\/]+)(.*)/', $url, $pregs))
{
$host = $pregs[2];
$port = ($pregs[1] == 'http' ? 80 : 443);
$suburl = $pregs[3];
if (!$suburl) $suburl = '/';
if ($fp = fsockopen($host, $port, $errno, $errstr, 10))
{
fputs($fp, "GET {$suburl} HTTP/1.0\r\n");
fputs($fp, "Host: {$host}\r\n");
fputs($fp, "User-Agnet: Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1)\r\n");
fputs($fp, "\r\n");
while (!feof($fp))
{
// $temp .= iconv('UTF-8', 'CP949', fgets($fp, 512)); // UTF-8
$temp .= fgets($fp, 512);
}
fclose($fp);
$arr = explode("\r\n\r\n", $temp, 2);
if (count($arr) < 2) return;
return array(
'header'=>$arr[0],
'body'=>$arr[1]
);
}
}
}

print_r(open_url('http://sir.co.kr/'));
?>
#개발자팁 #개발자 #팁자료실 #php

첨부파일

open_url.php (867 bytes) 62회 2012-09-04 13:37
|

댓글 14개

곰곰토리
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-04 (화) 20:16:28
크롤러인가요?
축축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-04 (화) 21:11:07
사람을 지칭하시는건가요 아니면 기능의 역할을 지칭하시는건가요? ㅎㅎ
곰곰토리
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-04 (화) 22:48:15
올려두고 물어보신다면 ;;
구글에서 크롤러를 검색해보세요 :)
기능이 비슷한지 해서 물어본 내용입니다.
축축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-05 (수) 00:15:29
기능은 웹사이트 코드를 긁어오는 것이니 당연히 비슷하죠.
이 코드를 수정해서 크롤러로 사용이 가능할수도 있겠지만, 저는 그런 의도로 올린건 아닙니다.
그리고 '크롤러'라고 하셔서 '크롤링 하는 사람'을 지칭하셨던 것인지
'크롤러 기능'을 지칭한 것인지를 여쭌것이지요 :D
쿠쿠로리
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-05 (수) 01:54:33
어떻게 사용하는건가요~?
축축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-05 (수) 08:01:28
제가 만든 open_url 함수를 추가하시고 호출하시면 됩니다.
반환값은 긁어오기에 성공하면 header와 body를 인덱스로 갖는 배열이 반환되고, 실패시엔 아무것도 반환되지 않습니다.
header 에는 http 헤더가, body에는 http 내용이 들어갑니다
애애기아빠
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-13 (목) 12:38:43
때론 유용하게 사용되겠네요 ^^
축축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-13 (목) 16:10:09
감사합니다~ ^^
프프로프리랜서
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-23 (일) 23:16:57
소스만 가지고오는
축축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-09-24 (월) 01:43:52
네 웹소스 긁어오는 프로그램입니다 ^^
김김대표
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-10-18 (목) 16:46:07
파싱이..스누피도 있고..^^;;
중요한건 소스를 어떻게 컨트롤하느냐겠지요ㅎㅎㅎ
태그 날리는것도 한몫할것이고..
한마디로 정규식을 배워야 요것을 매우 유용하게 사용할수있을것이다..이런거지요
축축복
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-10-20 (토) 01:41:27
맞는 말씀이지요 ㅎㅎ
귀귀족폭주
프로필 보기이 회원 글보기이 회원의 댓글보기
 2012-11-19 (월) 23:56:56
좋은 소스네요 ㅋㅋ
ttakumi22
프로필 보기이 회원 글보기이 회원의 댓글보기
 2013-06-10 (월) 10:41:11
유용한 정보 감사합니다
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
태그 필터 (최대 3개) 전체 개발자 소스 기타 mysql 팁자료실 javascript php linux flash 정규표현식 jquery node.js mobile 웹서버 os 프로그램 강좌 썸네일 이미지관련 도로명주소 그누보드5 기획자 견적서 계약서 기획서 마케팅 제안서 seo 통계 서식 통계자료 퍼블리셔 html css 반응형 웹접근성 퍼블리싱 표준화 반응형웹 홈페이지기초 부트스트랩 angularjs 포럼 스크린리더 센스리더 개발자톡 개발자팁 퍼블리셔톡 퍼블리셔팁 기획자톡 기획자팁 프로그램강좌 퍼블리싱강좌
+
제목 글쓴이 날짜 조회
12-09-12 조회 3,831
12-09-12 조회 2,826
12-09-12 조회 4,805
12-09-12 조회 4,485
12-09-12 조회 4,521
12-09-12 조회 3,696
12-09-12 조회 3,010
12-09-12 조회 6,265
12-09-12 조회 4,132
12-09-12 조회 4,425
12-09-12 조회 2,811
12-09-12 조회 2,762
12-09-11 조회 3,989
12-09-11 조회 2,887
12-09-11 조회 4,162
12-09-11 조회 3,812
12-09-11 조회 3,636
12-09-11 조회 3,595
12-09-11 조회 6,961
12-09-11 조회 5,625
12-09-11 조회 3,786
12-09-11 조회 2,701
12-09-11 조회 3,441
12-09-11 조회 3,869
12-09-11 조회 3,652
12-09-11 조회 3,435
12-09-11 조회 3,214
12-09-10 조회 2,781
12-09-10 조회 3,213
12-09-10 조회 3,079
12-09-10 조회 2,807
12-09-10 조회 2,765
12-09-10 조회 3,409
12-09-10 조회 2,701
12-09-10 조회 2,668
12-09-10 조회 2,713
12-09-10 조회 2,625
12-09-10 조회 3,471
12-09-10 조회 3,025
12-09-10 조회 4,643
12-09-10 조회 2,776
12-09-10 조회 3,047
12-09-10 조회 3,918
12-09-10 조회 2,977
12-09-10 조회 2,927
12-09-09 조회 2,856
12-09-09 조회 3,001
12-09-08 조회 3,455
12-09-08 조회 2,897
12-09-07 조회 3,068
12-09-07 조회 3,292
12-09-07 조회 3,114
12-09-07 조회 3,936
12-09-07 조회 3,231
12-09-07 조회 2,654
12-09-07 조회 3,320
12-09-07 조회 6,888
12-09-06 조회 2,967
12-09-06 조회 3,560
12-09-06 조회 5,302
12-09-06 조회 3,726
12-09-06 조회 4,103
12-09-06 조회 3,707
12-09-06 조회 4,498
12-09-06 조회 3,859
12-09-06 조회 3,424
12-09-06 조회 2,816
12-09-06 조회 1.6만
12-09-06 조회 3,902
12-09-06 조회 5,760
12-09-06 조회 3,432
12-09-06 조회 2,796
12-09-05 조회 2,962
12-09-05 조회 2,834
12-09-05 조회 2,980
12-09-05 조회 7,037
12-09-05 조회 8,770
12-09-05 조회 3,327
12-09-05 조회 7,346
12-09-05 조회 3,432
12-09-05 조회 2,881
12-09-05 조회 3,100
12-09-05 조회 2,927
12-09-05 조회 2,788
12-09-05 조회 3,081
12-09-05 조회 3,254
12-09-04 조회 2,837
12-09-04 조회 2,900
12-09-04 조회 3,478
12-09-04 조회 1만
12-09-04 조회 5,353
12-09-04 조회 2,840
12-09-04 조회 3,626
12-09-04 조회 3,441
12-09-04 조회 3,563
12-09-04 조회 7,515
12-09-04 조회 2,858
12-09-04 조회 3,432
12-09-03 조회 4,940
12-09-03 조회 4,541
글쓰기