第二十讲.HDFS管理员命令(查看状态信息+保存元数据+获取最新fsimage+设置目录配额和空间配额)

HDFS

 视频：【美妙人生】Hadoop课程系列之HDFS--手把手教你精通HDFS

【视频笔记】

hdfs管理员操作dfsadmin
-------------------------------
    1.-report：返回集群的状态信息
       $>hdfs dfsadmin -report
    2.-metasave：默认存放到{HADOOP_LOG_DIR}路径下,包含datanode和块的信息
       $>hdfs dfsadmin -metasave metasave.tt
       $>cd {HADOOP_LOG_DIR}
       $>gedit metasave.tt
    3.-fetchImage：从namenode节点获取最新的fsimage文件至本地指定目录
        $>hdfs dfsadmin -fetchImage ~/   (注：在datanode节点上执行)
    4.-setQuota:设置文件目录配额
         $>hdfs dfsadmin -setQuota 8 /hyxy
     $>hdfs dfsadmin -clrQuota /hyxy
     【注：如果给“/”设置目录配额后，无法执行clrQuota(清除配额操作)，这是当前hadoop版本的bug】
    4.-setSpaceQuota:设置文件目录空间配额,针对blocksize描述的，空间配额的值为文件大小*replication（副本数）
         $>hdfs dfsadmin -setSpaceQuota 8 /hyxy
     查看空间配额：
     $>hadoop fs -count -q /hyxy
       说明：目录配额   剩余目录配额     空间配额        剩余空间配额       目录数     文件数         总大小      文件名
         QUOTA     REMAINING_QUOTA  SPACE_QUOTA   REMAINING_SPACE_QUOTA DIR_COUNT  FILE_COUNT    CONTENT_SIZE FILE_NAME
           4               0            none             inf               2            2            890      /hyxy
       【
        [hyxy@master Desktop]$ hadoop fs -lsr /hyxy
        lsr: DEPRECATED: Please use 'ls -R' instead.
        drwxrwxrwx   - hyxy supergroup          0 2018-06-06 15:20 /hyxy/aaaaaaaaa
        -rwxrwxrwx   3 hyxy supergroup        579 2018-06-06 15:17 /hyxy/ed.xml
        -rwxrwxrwx   3 hyxy supergroup        311 2018-06-03 14:20 /hyxy/ed42-43.xml           
        】
        说明：【none：代表无限制；inf：代表剩余无限制】