paulwong
          

          

          



          
	
					
	
          
		
          
			【轉載】經典漫畫講解HDFS原理 
		
          
		分布式文件系統比較出名的有HDFS  和 GFS，其中HDFS比較簡單一點。本文是一篇描述非常簡潔易懂的漫畫形式講解HDFS的原理。比一般PPT要通俗易懂很多。不難得的學習資料。


          1、三個部分: 客戶端、nameserver（可理解為主控和文件索引,類似linux的inode）、datanode（存放實際數據）

          在這里，client的形式我所了解的有兩種，通過hadoop提供的api所編寫的程序可以和hdfs進行交互，另外一種就是安裝了hadoop的datanode其也可以通過命令行與hdfs系統進行交互，如在datanode上上傳則使用如下命令行：bin/hadoop fs -put example1 user/chunk/


          2、如何寫數據過程





          3、讀取數據過程



          4、容錯：第一部分：故障類型及其檢測方法（nodeserver 故障，和網絡故障，和臟數據問題）




          5、容錯第二部分：讀寫容錯



          6、容錯第三部分：dataNode 失效



          7、備份規則



          8、結束語
          
		
          
			posted on 2013-10-26 09:15 paulwong 閱讀(640) 評論(0)  編輯  收藏  所屬分類: 分布式 、HADOOP 、云計算 
		
          
	
          
	
	





          
	    
    




          








          

				

          



    







          
        
	




主站蜘蛛池模板：
林州市|
彩票|
二手房|
福鼎市|
三门县|
辽源市|
遵义县|
丹凤县|
大城县|
五寨县|
和林格尔县|
涿州市|
托克逊县|
田东县|
察隅县|
沈阳市|
云林县|
绥中县|
泾源县|
静乐县|
西畴县|
济源市|
建德市|
甘谷县|
武宣县|
苍山县|
邢台市|
旬邑县|
闸北区|
清镇市|
陵水|
卢湾区|
江门市|
中西区|
慈利县|
江安县|
乌鲁木齐县|
上思县|
临沧市|
莎车县|
隆子县|