itstarting:IT進(jìn)行時(shí)

——IT 進(jìn)行時(shí)(Email & MSN:zhengxianquan AT hotmail.com)

說在前面的話： 作為一名技術(shù)人員，喜歡通過自己的實(shí)戰(zhàn)去學(xué)習(xí)，也養(yǎng)成了寫學(xué)習(xí)筆記的習(xí)慣。個(gè)人做企業(yè)應(yīng)用更多，也涉及TB級(jí)別的非結(jié)構(gòu)化數(shù)據(jù)，對(duì)于Hadoop倒是第一次接觸，分布式計(jì)算總歸有用武之地。但這個(gè)筆記只能說是自己的盲學(xué)，就是簡(jiǎn)單的看看。

Keywords：Hadoop; HDFS; 學(xué)習(xí)筆記

目錄：
1. 準(zhǔn)備工作 2
1.1. Supported Platforms 2
1.2. Hadoop需要的基礎(chǔ)東西 2
1.3. 安裝Cygwin注意事項(xiàng) 2
2. 單機(jī)上配置過程 3
2.1. 配置SSH 3
2.1.1. 配置服務(wù) 3
2.1.2. 啟動(dòng)Cygwin sshd服務(wù) 4
2.1.3. Setup authorization keys 5
2.2. 修訂/配置/conf/core-site.xml 7
2.3. 修訂/配置/conf/mapred-site.xml 9
2.4. 修訂/配置\conf\masters和slaves 9
2.5. 修訂/配置\conf\hadoop-env.sh 9
2.6. 其他數(shù)據(jù)節(jié)點(diǎn)類似，重復(fù)即可 10
3. 格式化及啟動(dòng) 10
3.1. 啟動(dòng)命令 10
3.2. 如何驗(yàn)證啟動(dòng)成功 11
4. 使用及開發(fā) 12
4.1. 常用命令行使用方法 12
4.2. 可以通過瀏覽器訪問 15
5. FAQ 16
5.1. 為什么啟動(dòng)不了？ 16
5.2. 配置文件可能導(dǎo)致的問題 17
5.3. JobTracker一直有問題？ 19
5.4. 如何驗(yàn)證配置并啟動(dòng)成功？ 19
6. 常用命令 20
7. 參考 21