curl 로 파싱이 안되는사이트
본문
쿠팡 사이트 상품들을 크롤링 할려는데요. file_get_contents로는 안긁어 지더라구요.
그래서 curl을 사용해서 해봤는데.curl도 내용이 안긁어 져요.
혹시 php로 할수있는 방법중에 다른 파싱 방법이 있을까요?
답변 2
curl 보낼떄 user-agent 값을 바꿔보세요.
curl_setopt($ch, CURLOPT_USERAGENT,'Googlebot-Image/1.0 Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)');
agent 가 문제였군요..감사합니다
쿠팡은 그냥 파싱하면 안됩니다.
쿠팡 파싱을 막는 용도의 쿠키를 사용합니다.
답변을 작성하시기 전에 로그인 해주세요.