posts - 3, comments - 12, trackbacks - 0, articles - 0
            BlogJava :: 首頁(yè) :: 新隨筆 :: 聯(lián)系 :: 聚合  :: 管理
          一直對(duì)搜索引擎比較感興趣,可是要找一份這樣的工作感覺(jué)可遇不可求,于是自己開(kāi)始研究Nutch,隨便做了個(gè)小站,經(jīng)過(guò)幾個(gè)月的努力,蝸殼網(wǎng):http://www.wokenet.com終于上線了,雖然功能還不大完善,但是內(nèi)心仍然是非常的激動(dòng)。蝸殼網(wǎng)專做數(shù)碼產(chǎn)品的垂直搜索,力求打造成中國(guó)最大最全面的中文數(shù)碼產(chǎn)品專業(yè)搜索引擎,從各大IT垂直資訊網(wǎng)站中搜集資料,為廣大消費(fèi)者提供最權(quán)威的資訊

          導(dǎo)購(gòu)部分:匯聚各大IT資訊網(wǎng)站的導(dǎo)購(gòu)信息,為你提供最人性的導(dǎo)購(gòu)信息,即時(shí)你不懂電腦,也可以從這些信息中篩選出滿足自己需求的性價(jià)比最高的產(chǎn)品
          測(cè)評(píng)部分:匯聚各大IT資訊網(wǎng)站的測(cè)評(píng)信息,希望能夠幫助消費(fèi)者對(duì)已經(jīng)關(guān)注的IT產(chǎn)品有全面的了解
          論壇部分:匯聚各大IT資訊網(wǎng)站的產(chǎn)品論壇信息,為你提供用戶的評(píng)論,幫助你對(duì)產(chǎn)品的性能,售后服務(wù),優(yōu)缺點(diǎn)等有更加全面的了解。

              蝸殼網(wǎng)采用的是spring+struts+hibernate的主流java框架,搜索部分基于Nutch-0.7.2版本修改完成。目前功能較為簡(jiǎn)單,性能也不太理想,但是親身經(jīng)歷開(kāi)發(fā)過(guò)程,無(wú)疑對(duì)自身的技術(shù)水平有很大的提升。

              目前存在的問(wèn)題:
          1
          、性能問(wèn)題:由于采用的是比較老的Nutch版本,性能方面自然有一定影響,特別是摘要生成部分,希望對(duì)hapoop有一定研究之后可以轉(zhuǎn)移到0.9版本。
          2
          、美工問(wèn)題:由于沒(méi)有專業(yè)的美工做界面,只能自己硬著頭皮上,效果很不理想。。。哈哈,等俺有錢了也請(qǐng)個(gè)專業(yè)美工來(lái)做。
          3
          、代碼問(wèn)題:前期的開(kāi)發(fā)主要最求功能,導(dǎo)致代碼結(jié)構(gòu)有些混亂,希望忙完功能之后對(duì)于代碼結(jié)構(gòu)進(jìn)行調(diào)整。

          希望大家看過(guò)之后能給點(diǎn)意見(jiàn)!呵呵.感激不盡.


          評(píng)論

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)[未登錄](méi)  回復(fù)  更多評(píng)論   

          2008-10-12 19:00 by ytl
          界面比較清爽,給人的感覺(jué)還不錯(cuò)。。

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)[未登錄](méi)  回復(fù)  更多評(píng)論   

          2008-10-14 09:38 by chair
          不錯(cuò)

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)[未登錄](méi)  回復(fù)  更多評(píng)論   

          2008-10-28 11:27 by wahaha
          很不錯(cuò)
          我也想學(xué)!

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2008-11-24 10:33 by paopao
          可以多請(qǐng)教一些具體的開(kāi)發(fā)技術(shù)問(wèn)題嗎,偶是新菜鳥(niǎo),也很喜歡自動(dòng)抓取信息,首選當(dāng)然是yahoo的hadoop.

          buqiong1001@gmail.com

          望有空的話能多聊聊開(kāi)發(fā)的技術(shù)過(guò)程,對(duì)新人會(huì)有幫助,提前致謝了

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2008-12-03 10:11 by febbe
          可以請(qǐng)教一下嗎,我是菜鳥(niǎo)
          smart_zh_hui@yahoo.com.cn

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2009-04-03 21:55 by asdds
          能不能多弄點(diǎn)共享!

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2009-05-04 16:52 by 小陳
          你好,可以教我一下嗎?我最近也想弄一下這東西,能給我一點(diǎn)相關(guān)的資料嗎,我是菜鳥(niǎo)
          zty19845@126.com,謝謝!

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2009-08-03 12:36 by z87984
          你好,對(duì)在網(wǎng)絡(luò)抓取信息很感興趣,希望能夠一起學(xué)習(xí)。
          z87984@gmail.com,謝謝!

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2009-12-29 17:34 by 茶中生
          請(qǐng)問(wèn)你在用nutch 抓取的時(shí)候是用 unix 命令行傳遞命令的嗎? 不知道你有沒(méi)有實(shí)現(xiàn)直接使用 動(dòng)態(tài)類進(jìn)行直接執(zhí)行進(jìn)行抓取

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)[未登錄](méi)  回復(fù)  更多評(píng)論   

          2010-01-22 16:22 by 小李
          你好,對(duì)在網(wǎng)絡(luò)抓取信息很感興趣,希望能夠一起學(xué)習(xí)。
          ibc789@163.com,謝謝!

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)[未登錄](méi)  回復(fù)  更多評(píng)論   

          2010-01-26 13:51 by Jack
          能告訴我一下怎么用nutch做查詢結(jié)果分組嗎?
          email:ximinjie@gmail.com

          # re: 首次修改nutch開(kāi)發(fā)的一個(gè)小站(蝸殼網(wǎng):http://www.wokenet.com/)  回復(fù)  更多評(píng)論   

          2013-08-20 12:05 by kelvin—L
          你好!請(qǐng)教一些問(wèn)題:
          請(qǐng)問(wèn)一下
          1。你是如何把nutch抓取到的二進(jìn)制內(nèi)容,在項(xiàng)目中讀取的。
          2。nutch抓取時(shí)候,發(fā)現(xiàn)有很多url沒(méi)有被成功抓取過(guò)來(lái),請(qǐng)問(wèn)你做的時(shí)候,有什么 辦法是提高成功率。
          3。對(duì)抓取過(guò)來(lái)內(nèi)容你們是如何進(jìn)行關(guān)鍵詞搜索

          希望群主可以幫忙解答一下。萬(wàn)分感激!
          email:83132614@qq.com

          只有注冊(cè)用戶登錄后才能發(fā)表評(píng)論。


          網(wǎng)站導(dǎo)航:
           
          主站蜘蛛池模板: 伊宁县| 那曲县| 沅陵县| 定结县| 湘潭市| 莱州市| 利辛县| 汶川县| 长兴县| 九寨沟县| 鄄城县| 亚东县| 西宁市| 肃北| 南陵县| 明溪县| 西华县| 张家界市| 临潭县| 博罗县| 鹤峰县| 宜丰县| 福安市| 东辽县| 乌鲁木齐县| 绥滨县| 柳河县| 布尔津县| 定边县| 内乡县| 曲松县| 蓝山县| 娱乐| 炉霍县| 根河市| 大姚县| 灵寿县| 奉化市| 襄樊市| 武功县| 正宁县|