snoopy로 파싱을 해보고 있는데요 로그인에서 문제가....
본문
snoopy로 파싱을 해보고 있는데요 일반적인 내용은 잘 출력을 하고 있습니다.
다만 Daum사이트의 로그인에서 막혀서요...
Warning: fsockopen() [function.fsockopen]: unable to connect to logins.daum.net:80 이런 메시지가 나옵니다.
여기저기 서핑을 해봤는데 특별히 가능한 방법을 찾지는 못했고요
SessionID를 통해서 막고 있는듯 하기도 하고...
다른 방법으로 시도하면
보안에 취약한 방식으로
로그인을 시도하였습니다.
Daum은 허용하지 않은 URL 로그인을 제한합니다.
아래 로그인 버튼을 이용해서 다시 한번 로그인해 주세요.
이런 메시지가 나옵니다.
혹시 스누피로 파싱할 때 다음 사이트의 로그인 처리를 어떻게 하셨는지 한 수 지도 부탁드립니다.
답변 2
로그인이 필요한 사이트를 crawl시에는
cookie값 또는 SSL인증 실패일 경우가 많습니다.
조금 더 다양한 옵션이 필요하시면 curl을 사용하는 것을 추천합니다.
user-agent 를 변경해보세여..
답변을 작성하시기 전에 로그인 해주세요.