隨筆-26  評論-111  文章-19  trackbacks-0



          能實現(xiàn)整個網(wǎng)站的抓取,暫時還不支持javascript形式的連接

          能抓取網(wǎng)頁,網(wǎng)頁中的所有的URL重新生成,圖片,文件,包括所有格式的文件,全部都能保持原有的路徑結構

          抓取下的網(wǎng)頁,通過apache搭建成網(wǎng)站,能在本地保持成一個完整的網(wǎng)站的形式

          能直接使用,也能支持二次開發(fā)使用,不過暫時還會存在比較多的不完善的地方.

          提供內(nèi)置線程,能控制抓取操作執(zhí)行的時間,循環(huán)執(zhí)行

          東西還不是很完善,歡迎大家提出意見

          下載地址  http://www.aygfsteel.com/Files/snoics/snoics-reptile.rar

          posted on 2006-02-10 09:20 snoics 閱讀(2991) 評論(11)  編輯  收藏

          評論:
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-02-12 12:20 | barry
          很感興趣。
          關注二次開發(fā)的問題。
            回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-02-15 14:26 | hike
          支持!
            回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-02-18 20:45 | 小雨姐姐
          恩,不錯!雖然我不懂..........  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-03-03 10:42 | minggo
          很感興趣!  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-08-03 16:05 | cyp
          你這個怎么用呀!怎么沒 有一個demo  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-08-22 17:11 | tiantian
          C:\snoics\bin>java -classpath ../lib/reptile.jar;../lib/snoics.jar;../lib/log4j-
          1.2.9.jar;../lib/commons-logging.jar;../lib/spring.jar; com.snoics.reptile.main.
          NormalMain
          Exception in thread "main" java.lang.NoClassDefFoundError: com/snoics/reptile/ma
          in/NormalMain

          出現(xiàn)以下錯誤信息,請問是哪里的問題?
          xp_ma2000@sohu.com  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-08-24 17:08 | shiwei
          bat文件里面的一個jar文件名錯了,修改一下就行  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2006-10-29 16:18 | 冷面閻羅
          有沒有設計文檔等,我想研究一下你的這個代碼。不知道可以不
          我的msn:soddabao@163.com  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2007-07-12 21:26 | 楊鑄
          這個怎么下不下來啊 ,即使下載了,也是一個損壞的文件啊,急!  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2008-06-19 16:20 | 外星飛碟
          支持一下,  回復  更多評論
            
          # re: 自己用java做的一個類似網(wǎng)頁爬蟲的東西 2008-07-08 09:20 | 老匡
          挺不錯。
          有沒有源碼提供啊。
          學習一下。
          kqy929@126.com
          謝謝了~~  回復  更多評論
            

          只有注冊用戶登錄后才能發(fā)表評論。


          網(wǎng)站導航:
           
          <2006年2月>
          2930311234
          567891011
          12131415161718
          19202122232425
          2627281234
          567891011

          常用鏈接

          留言簿(20)

          隨筆分類(8)

          隨筆檔案(26)

          文章分類(18)

          文章檔案(19)

          收藏夾

          Space

          最新隨筆

          搜索

          •  

          積分與排名

          • 積分 - 95950
          • 排名 - 605

          最新評論

          閱讀排行榜

          評論排行榜

          主站蜘蛛池模板: 辽源市| 沙洋县| 兰坪| 新野县| 理塘县| 漠河县| 石首市| 霞浦县| 栖霞市| 东乡县| 綦江县| 武隆县| 迁安市| 峨边| 同心县| 崇信县| 习水县| 景德镇市| 繁峙县| 德令哈市| 萨嘎县| 连平县| 原平市| 汉川市| 北京市| 漳平市| 瑞丽市| 黄骅市| 紫金县| 呼图壁县| 仪陇县| 历史| 陈巴尔虎旗| 昭通市| 拉萨市| 两当县| 台东市| 昌平区| 塔城市| 丹棱县| 临朐县|