隨筆-314  評論-209  文章-0  trackbacks-0

          一、回收站簡介:

              在HDFS里,刪除文件時,不會真正的刪除,其實是放入回收站/trash,回收站里的文件可以快速恢復。

              可以設置一個時間閥值,當回收站里文件的存放時間超過這個閥值或是回收站被清空時,文件才會被徹底刪除,并且釋放占用的數據塊。

          二、實例:

              Hadoop的回收站trash功能默認是關閉的,所以需要在core-site.xml中手動開啟。

          1、修改core-site.xml,增加:

          復制代碼
          <property>  <name>fs.trash.interval</name>  <value>1440</value>  <description>Number of minutes between trash checkpoints.  If zero, the trash feature is disabled.  </description>  </property>
          復制代碼

          默認是0,單位是分鐘,這里設置為1天。
          刪除數據rm后,會將數據move到當前文件夾下的.Trash目錄。

          2、測試

          1)、新建目錄input

          hadoop/bin/hadoop fs -mkdir input

          2)、上傳文件

          root@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input

          3)、刪除目錄input

          [root@master data]# hadoop fs -rmr input  Moved to trash: hdfs://master:9000/user/root/input

          4)、查看當前目錄

          [root@master data]# hadoop fs -ls  Found 2 items  drwxr-xr-x - root supergroup 0 2011-02-12 22:17 /user/root/.Trash

          發現input刪除了,多了一個目錄.Trash
          5)、恢復剛剛刪除的目錄

          [root@master data]# hadoop fs -mv /user/root/.Trash/Current/user/root/input /user/root/input

          6)、查看恢復的數據

          [root@master data]# hadoop fs -ls input  Found 2 items  -rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/root/input/file01  -rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/root/input/file02

          7)、刪除.Trash目錄(清理垃圾)

          [root@master data]# hadoop fs -rmr .Trash  Deleted hdfs://master:9000/user/root/.Trash
          posted on 2017-05-12 11:20 xzc 閱讀(218) 評論(0)  編輯  收藏 所屬分類: hadoop
          主站蜘蛛池模板: 日土县| 米泉市| 新源县| 宜都市| 黑山县| 徐汇区| 合江县| 和平区| 临泉县| 昌乐县| 西充县| 尉犁县| 留坝县| 察隅县| 永清县| 西和县| 周至县| 梓潼县| 宿松县| 垣曲县| 萨嘎县| 雷州市| 林州市| 灵璧县| 和田市| 广德县| 石林| 屏山县| 三河市| 大冶市| 高阳县| 东平县| 历史| 六安市| 泸西县| 长阳| 盘山县| 绥滨县| 郯城县| 龙南县| 富阳市|