웹로봇 구현해서 c++소스 있으신분....

csk6124의 이미지

웹로봇을 구현하고자 합니다.
음.. 구현이라기 보다는 구현된것을 찾구 저가 원하는 것으로 수정하고자 합니다.
구현된 소스는 c++을 원하는데 자바나 perl이 많더군요 파이썬이나
그래서 혹시나 소스가 있으신분 있으시면 좀 부탁드립니다.
공개소스에서는 찾아봐두 음.. 없더군요..
있간한데 저가 원하는건 아니구..
저가 원하는건 전웹사이트를 돌다니면서 <object>구문이 있으면 디비에 넣는겁니다.
간단하지만 . 웹사이트를 돌아다니는부분에서 현재 막혀서 이렇게 올립니다.
.. 제발.. 부탁..

saxboy의 이미지

wget, libwww.

그리고 http://en.wikipedia.org/wiki/Web_crawler

웹크롤러코드는 꽤 많지요. 정말로 쓸만한 것이 공개되어 있는가와는 좀 별개의 문제이지만... 복잡한 용도가 아니라면 wget의 recursive 옵션만으로도 충분할 것 같습니다만...

kicom95의 이미지

htdig 가 C++ 로 작성 되어 있습니다.

오픈소스 검색엔진이지요 !

가자 해외로 ~ .. 돈 벌러.