HDFS dfs 操作命令

查看文件常用命令

  • 命令格式
    1.hdfs dfs -ls path 查看文件列表
    2.hdfs dfs -lsr path 递归查看文件列表
    3.hdfs dfs -du path 查看path下的磁盘情况,单位字节
  • 使用示例
    1.hdfs dfs -ls / 查看当前目录
    2.hdfs dfs - lsr / 递归查看当前目录

创建文件夹

  • 命令格式
    hdfs dfs -mkdir path
  • 使用用例
    hdfs dfs -mkdir /user/iron
    注:该命令可递归创建文件夹,不可重复创建,在Linux文件系统中不可见

创建文件

  • 命令格式
    hdfs dfs -touchz path
  • 使用用例
    hdfs dfs -touchz /user/iron/iron.txt
    注:该命令不可递归创建文件即当该文件的上级目录不存在时无法创建该文件,可重复创建但会覆盖原有的内容

复制文件和目录

  • 命令格式
    hdfs dfs -cp 源目录 目标目录
  • 使用用例
    hdfs dfs -cp /user/iron /user/iron01
    注:该命令会将源目录的整个目录结构都复制到目标目录中
    hdfs dfs -cp /user/iron/* /user/iron01
    注:该命令只会将源目录中的文件及其文件夹都复制到目标目录中

移动文件和目录

  • 命令格式
    hdfs dfs -mv 源目录 目标目录
  • 使用用例
    hdfs dfs -mv /user/iron /user/iron01

赋予权限

  • 命令格式
    hdfs dfs -chmod [权限参数][拥有者][:[组]] path
  • 使用用例
    hdfs dfs -chmod 777 /user/*
    注:该命令是将user目录下的所用文件及其文件夹(不包含子文件夹中的文件)赋予最高权限:读,写,执行
    777表示该用户,该用户的同组用户,其他用户都具有最高权限

上传文件

  • 命令格式
    hdfs dfs -put 源文件夹 目标文件夹
  • 使用用例
    hdfs dfs -put /home/hadoop01/iron /user/iron01
    注:该命令上传Linux文件系统中iron整个文件夹
    hdfs dfs -put /home/hadoop01/iron/* /user/iron01
    注:该命令上传Linux文件系统中iron文件夹中的所有文件(不包括文件夹)
    类似命令:
    hdfs dfs -copyFromLocal 源文件夹 目标文件夹 作用同put
    hdfs dfs -moveFromLocal 源文件夹 目标文件夹 上传后删除本地

下载文件

  • 命令格式
    hdfs dfs -get源文件夹 目标文件夹
  • 使用用例
    hdfs dfs -get /user/iron01 /home/hadoop01/iron
    注:该命令下载hdfs文件系统中的iron01整个文件夹到Linux文件系统中
    hdfs dfs -get /user/iron01/* /home/hadoop01/iron
    注:该命令下载hdfs文件系统中的iron01整个文件夹到Linux文件系统中(不包含文件夹)
    类似命令
    hdfs dfs -copyToLocal 源文件夹 目标文件夹 作用同get
    hdfs dfs -moveToLocal 源文件夹 目标文件夹 get后删除源文件

查看文件内容

删除文件

  • 命令格式
    hdfs dfs -rm 目标文件
    hdfs dfs -rmr 目标文件 递归删除(慎用)
  • 使用用例
    hdfs dfs -rm /user/test.txt 删除test.txt文件
    hdfs dfs -rmr /user/testdir 递归删除testdir文件夹
    注:rm不可以删除文件夹
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 两台Linux服务器[https://www.zhihu.com/search?q=Linux%E6%9C%8D%...
    薄荷糖的味道_7a5b阅读 8,903评论 0 3
  • 一段时间以来,我们在网上向读者介绍了如何为Linux以及类Linux操作系统[https://www.zhihu....
    彩色的炮灰阅读 4,954评论 0 0
  • 德国/法国EPR合规&WEEE和Triman标志是不是强制性的?如何使用合规标志? 一、WEEE标志 作为电子电器...
    anna_易迈Ymai1689阅读 9,142评论 0 0
  • 之前写过从应聘者的角度来分析面试,今天王豆豆想以面试官来分析如何去做面试。 以前王豆豆在培训机构时也会帮助学员做模...
    帅锅打酱油阅读 3,728评论 0 1
  • 初次申请林业调查规划设计资质需要什么人员?对于初次申请林业调查规划设计资质的单位,只能从丁级或者丙级资质开始 丙级...
    莫工阅读 1,287评论 0 0