常用命令

  • hadoop dfsadmin -report查看HDFS的状态报告。
  • source /etc/profile使配置的环境变量生效,CentOS6.5
  • 一条本地抽取一部分数据测试mapReduce的命令:cat The_Man_of_Property.txt | python map.py | sort -k1 | python red.py | sort -k2 -nr | head -20
image.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • HDFS基本概念篇 HDFS前言 设计思想分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而...
    张鱼猫阅读 2,823评论 0 4
  • 最近都在和Linux打交道,这方面基础比较薄弱的我只好买了本鸟哥的书看看,感觉还不错。我觉得Linux相比wind...
    blvftigd阅读 840评论 0 0
  • 系统信息cat /etc/os-release 查看系统详细信息(只在centos和redhat上试过生效)arc...
    MicoCube阅读 731评论 0 0
  • centos7 常用命令管理centos服务器的时候常会对文件进行一些常规操作,除了ftp之外了解在ssh下必要的...
    小线亮亮阅读 1,223评论 0 2
  • Ubuntu 常用命令大全 查看软件 xxx 安装内容 #dpkg -L xxx 查找软件 #apt-cache ...
    guiwuzhe阅读 2,644评论 0 14