KnP House for Daily

검색 쿼리를 날려 html문서 파싱하기!! 본문

MyProject/issue

검색 쿼리를 날려 html문서 파싱하기!!

K.ung 2014.01.16 11:46

네이버, 다음, 구글에서 쿼리를 URL에 붙여 날려 HTML문서를 파싱 하려고한다.


http://search.daum.net/search?w=tot&DA=YZRR&t__nil_searchbox=btn&sug=&sq=&o=&q=검색할 쿼리


위와 같이 붙여서 웹브라우져에 적으면 결과는 잘나오는데, 


소스에서 URL 날리면, 403 error, 나 비정상적인 접근이라고 하여, 접근을 거부한다.... 크아으앎니ㅏ


방법은, 웹브라우저에서 쿼리를 날린 것처럼 속여야 겟다. Header에 user-agent를 수정해서 붙여서 날려야겠는데, 해봐야겟다..

저작자 표시 비영리 변경 금지
신고

'MyProject > issue' 카테고리의 다른 글

검색 쿼리를 날려 html문서 파싱하기!!  (0) 2014.01.16
0 Comments
댓글쓰기 폼