隨筆-314  評論-209  文章-0  trackbacks-0

          一、回收站簡介:

              在HDFS里,刪除文件時,不會真正的刪除,其實是放入回收站/trash,回收站里的文件可以快速恢復。

              可以設置一個時間閥值,當回收站里文件的存放時間超過這個閥值或是回收站被清空時,文件才會被徹底刪除,并且釋放占用的數據塊。

          二、實例:

              Hadoop的回收站trash功能默認是關閉的,所以需要在core-site.xml中手動開啟。

          1、修改core-site.xml,增加:

          復制代碼
          <property>  <name>fs.trash.interval</name>  <value>1440</value>  <description>Number of minutes between trash checkpoints.  If zero, the trash feature is disabled.  </description>  </property>
          復制代碼

          默認是0,單位是分鐘,這里設置為1天。
          刪除數據rm后,會將數據move到當前文件夾下的.Trash目錄。

          2、測試

          1)、新建目錄input

          hadoop/bin/hadoop fs -mkdir input

          2)、上傳文件

          root@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input

          3)、刪除目錄input

          [root@master data]# hadoop fs -rmr input  Moved to trash: hdfs://master:9000/user/root/input

          4)、查看當前目錄

          [root@master data]# hadoop fs -ls  Found 2 items  drwxr-xr-x - root supergroup 0 2011-02-12 22:17 /user/root/.Trash

          發現input刪除了,多了一個目錄.Trash
          5)、恢復剛剛刪除的目錄

          [root@master data]# hadoop fs -mv /user/root/.Trash/Current/user/root/input /user/root/input

          6)、查看恢復的數據

          [root@master data]# hadoop fs -ls input  Found 2 items  -rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/root/input/file01  -rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/root/input/file02

          7)、刪除.Trash目錄(清理垃圾)

          [root@master data]# hadoop fs -rmr .Trash  Deleted hdfs://master:9000/user/root/.Trash
          posted on 2017-05-12 11:20 xzc 閱讀(218) 評論(0)  編輯  收藏 所屬分類: hadoop
          主站蜘蛛池模板: 波密县| 安国市| 榆树市| 新乡县| 遂昌县| 水城县| 舒兰市| 大竹县| 南江县| 开远市| 玉门市| 平陆县| 泰来县| 汽车| 鞍山市| 南投市| 荥经县| 宣城市| 阿鲁科尔沁旗| 县级市| 牟定县| 德安县| 历史| 京山县| 博野县| 正安县| 岢岚县| 东城区| 株洲市| 平乡县| 鹤壁市| 三原县| 大石桥市| 申扎县| 台东县| 张北县| 南陵县| 莱芜市| 德州市| 嵊州市| 延吉市|