스누피
-
[사이트긁어오기 강좌#1] php와 snoopy로 로그인 처리파싱의 추억 2012. 2. 21. 07:00
사이트 긁어오기를 하다보면, 로그인을 해야만 가능한 사이트들을 만나게 된다. 사이트파싱 에서 로그인처리는 까다로운 녀석인데, snoopy에는 로그인을 처리하는 기능이 있다. 로그인에 변수들을 던져주면 자동으로 로그인이 된다. 로그인 처리를 해보면, 대부분 스누피를 이용해서 파싱이 가능하다. 물론, 좀 복잡한 방법으로 해야만 하는 경우도 있다. 복잡한 방법은 놔두고, 간단히 처리하는 방법을 알아본다. 테스트로 사용할 사이트중에 어디가 좋을까나.. 제휴사이트중 “링크프라이스” 라는 곳으로 해보자. 보통의 사이트들은 아래 같은 방법이면 70%는 로그인이 가능하다. 일단, 사이트의 로그인처리를 살펴봐야한다. 알아야 할 항목은 크게 3가지다. 1. 로그인 처리를 하는 url 2. 아이디를 받아내는 변수 3. 비밀..
-
사이트 긁어오기로 할 수 있는 6가지 놀라운 일파싱의 추억 2011. 11. 18. 13:41
사이트 파싱이라는 단어보다는 사이트 긁어오기라는 단어가 한국 사람에게는 혀에 감긴다. 사이트 긁어오기라는 단어가 주는 어감은 좀 그렇긴 하지만.. 사이트 파싱은 여러가지 긍정적인 활용이 가능하다. 사이트 긁어오기는 단순 노가다 반복작업을 대신해주면서 사람에게 시간을 벌어준다. 예전부터 달을파는아이 블로그에 사이트 긁어오기, 사이트 파싱에 관한 글들을 올렸다. 생각지 못하게 작업의뢰가 몇번 들어왔다. 작업의뢰는 내가 생각했던것보다 훨씬 다양했다. 생각지도 못한 곳에서 쓰일 수도 있음을 알았다. 몇일의 프로그램작업으로 한달이상 해야하는 노가다를 대신할 수도 있었고, 매일 매일 지겹게 반복되던 단순작업들이 사라지기도 했다. 기술적인 이야기는 놔두고, 활용사례를 소개하고자 한다.혹시나 매일 반복되는 노가다나 막..
-
죄송합니다. 요청하신 검색이 원활하게 수행되지 못하고 있습니다.. 라는 오류가 뜰때는?파싱의 추억 2011. 2. 18. 22:10
스누피를 이용해서 네이버 검색결과를 긁어오는 기능을 구현하면, 여러가지로 쓸모가 있다. 하지만, 네이버에 과도하게 검색결과를 요청하면 "죄송합니다. 요청하신 검색이 원활하게 수행되지 못하고 있습니다."라는 오류가 발생한다. 전체 에러메세지 내용은 아래와 같다. 현재 사용 중이신 PC에서 네이버 검색의 안정적인 서비스 제공을 방해하는 내용이 확인되었습니다. 아래와 같이 고객님의 PC를 점검하시면, 더욱 편리하게 네이버 검색을 사용하실 수 있습니다. 개인 PC : 사용 중인 백신 프로그램을 최신 엔진으로 업데이트하고, 시스템 검사 및 치료 수행. 네이버 백신 다운로드 (바이러스, 스파이웨어 무료 검사 및 치료) 공유 PC (기관, 학교, 회사 등) : 해당 시스템의 네트워크/보안 담당자에게 문의 위와 같이 ..
-
[강좌] php용 강력하면서 쉬운 소켓(socket)클래스 , Snoopy달을파는아이 2008. 4. 29. 09:31
왜 그동안 삽질을 하고 있었던걸까? 일반 호스팅에서는 외부에 있는 파일을 file,fopen으로 가져오는것을 막아 놨다. 그래서 꽁수로 python을 쓰고 있었다. 그.런.데. 당연히 안될거라 생각했던 fsocket은 된다. -_-; 난 왜 저걸 하고싶어서 파이썬 책을 두권이나 샀던걸까 .. /( //\\ // )_.-"""-._,-""-. \\ ^,'_\ /_\ ) `./ /O\| |/O\\ / \ \_/| |\_/ \_/ \ .' _ `. / .-. ( .:(_):. ) ,-. ( `._`._.-._,'_,' ) ) ( ( .-------------. ) hjw `-' `-' 여튼 snoopy 라는 강력하면서 쉬운 php용 소켓 클래스를 소개한다. 마지막 버전은 http://snoopy.sourcef..