paulwong
          

          

          



          
	
					
	
          
		
          
			【轉載】經典漫畫講解HDFS原理 
		
          
		分布式文件系統比較出名的有HDFS  和 GFS，其中HDFS比較簡單一點。本文是一篇描述非常簡潔易懂的漫畫形式講解HDFS的原理。比一般PPT要通俗易懂很多。不難得的學習資料。


          1、三個部分: 客戶端、nameserver（可理解為主控和文件索引,類似linux的inode）、datanode（存放實際數據）

          在這里，client的形式我所了解的有兩種，通過hadoop提供的api所編寫的程序可以和hdfs進行交互，另外一種就是安裝了hadoop的datanode其也可以通過命令行與hdfs系統進行交互，如在datanode上上傳則使用如下命令行：bin/hadoop fs -put example1 user/chunk/


          2、如何寫數據過程





          3、讀取數據過程



          4、容錯：第一部分：故障類型及其檢測方法（nodeserver 故障，和網絡故障，和臟數據問題）




          5、容錯第二部分：讀寫容錯



          6、容錯第三部分：dataNode 失效



          7、備份規則



          8、結束語
          
		
          
			posted on 2013-10-26 09:15 paulwong 閱讀(637) 評論(0)  編輯  收藏  所屬分類: 分布式 、HADOOP 、云計算 
		
          
	
          
	
	





          
	    
    




          








          

				

          



    







          
        
	




主站蜘蛛池模板：
墨脱县|
长海县|
繁峙县|
修武县|
米易县|
五莲县|
忻州市|
建瓯市|
弥渡县|
固原市|
普兰店市|
自贡市|
威远县|
子洲县|
丰镇市|
淳安县|
余江县|
蓬莱市|
汝城县|
花垣县|
建湖县|
大庆市|
安图县|
永平县|
县级市|
吉隆县|
泸溪县|
寿阳县|
古浪县|
界首市|
彩票|
永定县|
西宁市|
如东县|
丹棱县|
新营市|
高青县|
涟源市|
海口市|
楚雄市|
车致|