paulwong
          

          

          



          
	
					
	
          
		
          
			【轉載】經典漫畫講解HDFS原理 
		
          
		分布式文件系統比較出名的有HDFS  和 GFS，其中HDFS比較簡單一點。本文是一篇描述非常簡潔易懂的漫畫形式講解HDFS的原理。比一般PPT要通俗易懂很多。不難得的學習資料。


          1、三個部分: 客戶端、nameserver（可理解為主控和文件索引,類似linux的inode）、datanode（存放實際數據）

          在這里，client的形式我所了解的有兩種，通過hadoop提供的api所編寫的程序可以和hdfs進行交互，另外一種就是安裝了hadoop的datanode其也可以通過命令行與hdfs系統進行交互，如在datanode上上傳則使用如下命令行：bin/hadoop fs -put example1 user/chunk/


          2、如何寫數據過程





          3、讀取數據過程



          4、容錯：第一部分：故障類型及其檢測方法（nodeserver 故障，和網絡故障，和臟數據問題）




          5、容錯第二部分：讀寫容錯



          6、容錯第三部分：dataNode 失效



          7、備份規則



          8、結束語
          
		
          
			posted on 2013-10-26 09:15 paulwong 閱讀(640) 評論(0)  編輯  收藏  所屬分類: 分布式 、HADOOP 、云計算 
		
          
	
          
	
	





          
	    
    




          








          

				

          



    







          
        
	




主站蜘蛛池模板：
六枝特区|
庐江县|
罗甸县|
灌阳县|
镇雄县|
洞口县|
抚顺县|
秦安县|
芦溪县|
八宿县|
胶州市|
丹棱县|
黄骅市|
收藏|
新郑市|
蕲春县|
遂昌县|
汪清县|
恭城|
任丘市|
灵台县|
万源市|
宜宾市|
兖州市|
湘阴县|
绥芬河市|
淮安市|
临潭县|
上蔡县|
凌源市|
同心县|
沛县|
清水县|
伊金霍洛旗|
图片|
巨鹿县|
阳春市|
黄骅市|
三门县|
南漳县|
贵州省|