HDFS 和 YARN的常用命令

一、hdfs常用命令

1） 查看帮助 hdfs dfs -help

2） 查看当前目录信息 hdfs dfs -ls /

3） 上传文件 hdfs dfs -put /本地路径 /hdfs路径

4） 下载文件到本地 hdfs dfs -get /hdfs路径 /本地路径

5） 创建目录 hdfs dfs -mkdir /目录名

6） 移动hdfs文件 hdfs dfs -mv /hdfs路径 /hdfs路径

7） 复制hdfs文件 hdfs dfs -cp /hdfs路径 /hdfs路径

8） 删除hdfs文件 hdfs dfs -rm /aa.txt

9） 删除hdfs目录 hdfs dfs -rm -r /目录名

10）查看hdfs中的文件 hdfs dfs -cat /文件 和 hdfs dfs -tail -f /文件

11）创建多级文件夹 hdfs dfs -mkdir -p /目录名1/目录名2

12）合并下载 hdfs dfs -getmerge /hdfs路径文件夹 /合并后的文件

13）剪切文件 hdfs dfs -moveFromLocal a.txt /aa.txt

14）查看文件夹中有多少个文件 hdfs dfs -count /目录名

15）查看hdfs的总空间 hdfs dfs -df / 和 hdfs dfs -df -h /

16）修改副本数 hdfs dfs -setrep 数量 /文件

二、yarn常用命令

1. 打印hadoop的版本 yarn version
   
2. 查看CLASSPATH yarn classpath
   
3. 运行jar文件 yarn jar <jar> [mainClass] args...
   
4. 打印节点的报告 yarn node [-all | -list | -list -states <States> | -status <NodeId>]
   
5. 打印container(s)的报告 yarn container [-help | -list <Application Attempt Id> | -status <ContainerId>]
   
6. 打印application信息 yarn application [-list | -list -appStates <States> | -list -appTypes <Types> | -status <ApplicationId>]