itstarting:IT進行時

          想自己所想,做自己所愛

            BlogJava :: 首頁 :: 新隨筆 :: 聯系 :: 聚合  :: 管理 ::
            28 隨筆 :: 3 文章 :: 55 評論 :: 0 Trackbacks

          ——IT 進行時(Email & MSN:zhengxianquan AT hotmail.com)

          說在前面的話: 作為一名技術人員,喜歡通過自己的實戰去學習,也養成了寫學習筆記的習慣。個人做企業應用更多,也涉及TB級別的非結構化數據,對于Hadoop倒是第一次接觸,分布式計算總歸有用武之地。但這個筆記只能說是自己的盲學,就是簡單的看看。

          Keywords:Hadoop; HDFS; 學習筆記

          目錄:
          1. 準備工作 2
          1.1. Supported Platforms 2
          1.2. Hadoop需要的基礎東西 2
          1.3. 安裝Cygwin注意事項 2
          2. 單機上配置過程 3
          2.1. 配置SSH 3
          2.1.1. 配置服務 3
          2.1.2. 啟動Cygwin sshd服務 4
          2.1.3. Setup authorization keys 5
          2.2. 修訂/配置/conf/core-site.xml 7
          2.3. 修訂/配置/conf/mapred-site.xml 9
          2.4. 修訂/配置\conf\masters和slaves 9
          2.5. 修訂/配置\conf\hadoop-env.sh 9
          2.6. 其他數據節點類似,重復即可 10
          3. 格式化及啟動 10
          3.1. 啟動命令 10
          3.2. 如何驗證啟動成功 11
          4. 使用及開發 12
          4.1. 常用命令行使用方法 12
          4.2. 可以通過瀏覽器訪問 15
          5. FAQ 16
          5.1. 為什么啟動不了? 16
          5.2. 配置文件可能導致的問題 17
          5.3. JobTracker一直有問題? 19
          5.4. 如何驗證配置并啟動成功? 19
          6. 常用命令 20
          7. 參考 21

          地址:http://itstarting.javaeye.com/blog/513659
          posted on 2009-12-15 22:43 IT進行時 閱讀(2042) 評論(1)  編輯  收藏 所屬分類: hadoop及云計算

          只有注冊用戶登錄后才能發表評論。


          網站導航:
           
          主站蜘蛛池模板: 新兴县| 博客| 锦州市| 孝感市| 临桂县| 介休市| 贞丰县| 长海县| 德兴市| 澄江县| 体育| 额尔古纳市| 建德市| 冷水江市| 云龙县| 拜城县| 康乐县| 华亭县| 图木舒克市| 即墨市| 双鸭山市| 邹平县| 泽州县| 伽师县| 昌乐县| 广灵县| 江川县| 镇赉县| 永靖县| 新民市| 宁明县| 泰兴市| 会理县| 离岛区| 大安市| 克东县| 济源市| 浦北县| 肇庆市| 杂多县| 陕西省|