隨筆-26  評論-111  文章-19  trackbacks-0



          能實現整個網站的抓取,暫時還不支持javascript形式的連接

          能抓取網頁,網頁中的所有的URL重新生成,圖片,文件,包括所有格式的文件,全部都能保持原有的路徑結構

          抓取下的網頁,通過apache搭建成網站,能在本地保持成一個完整的網站的形式

          能直接使用,也能支持二次開發使用,不過暫時還會存在比較多的不完善的地方.

          提供內置線程,能控制抓取操作執行的時間,循環執行

          東西還不是很完善,歡迎大家提出意見

          下載地址  http://www.aygfsteel.com/Files/snoics/snoics-reptile.rar

          posted on 2006-02-10 09:20 snoics 閱讀(2991) 評論(11)  編輯  收藏

          評論:
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-02-12 12:20 | barry
          很感興趣。
          關注二次開發的問題。
            回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-02-15 14:26 | hike
          支持!
            回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-02-18 20:45 | 小雨姐姐
          恩,不錯!雖然我不懂..........  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-03-03 10:42 | minggo
          很感興趣!  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-08-03 16:05 | cyp
          你這個怎么用呀!怎么沒 有一個demo  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-08-22 17:11 | tiantian
          C:\snoics\bin>java -classpath ../lib/reptile.jar;../lib/snoics.jar;../lib/log4j-
          1.2.9.jar;../lib/commons-logging.jar;../lib/spring.jar; com.snoics.reptile.main.
          NormalMain
          Exception in thread "main" java.lang.NoClassDefFoundError: com/snoics/reptile/ma
          in/NormalMain

          出現以下錯誤信息,請問是哪里的問題?
          xp_ma2000@sohu.com  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-08-24 17:08 | shiwei
          bat文件里面的一個jar文件名錯了,修改一下就行  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2006-10-29 16:18 | 冷面閻羅
          有沒有設計文檔等,我想研究一下你的這個代碼。不知道可以不
          我的msn:soddabao@163.com  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2007-07-12 21:26 | 楊鑄
          這個怎么下不下來啊 ,即使下載了,也是一個損壞的文件啊,急!  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2008-06-19 16:20 | 外星飛碟
          支持一下,  回復  更多評論
            
          # re: 自己用java做的一個類似網頁爬蟲的東西 2008-07-08 09:20 | 老匡
          挺不錯。
          有沒有源碼提供啊。
          學習一下。
          kqy929@126.com
          謝謝了~~  回復  更多評論
            

          只有注冊用戶登錄后才能發表評論。


          網站導航:
           
          主站蜘蛛池模板: 沙河市| 庆城县| 连江县| 突泉县| 福海县| 赞皇县| 德惠市| 正定县| 东平县| 东阿县| 无极县| 林州市| 商都县| 临江市| 鄢陵县| 盱眙县| 织金县| 女性| 株洲县| 麻江县| 军事| 太仆寺旗| 资溪县| 吴江市| 凤庆县| 宜兴市| 拜城县| 永仁县| 清丰县| 清河县| 普宁市| 安溪县| 泽州县| 比如县| 泊头市| 泰宁县| 象州县| 新巴尔虎右旗| 灵石县| 吴川市| 松溪县|