Hadoop 任务查看与管理命令

1.查看 Job 信息:
hadoop job -list

2.杀掉 Job:
hadoop job –kill job_id

3.指定路径下查看历史日志汇总:
hadoop job -history output-dir

4.作业的更多细节:
hadoop job -history all output-dir

5.打印map和reduce完成百分比和所有计数器:
hadoop job –status job_id

6.杀死任务。被杀死的任务不会不利于失败尝试:
hadoop jab -kill-task <task-id>

7.使任务失败。被失败的任务会对失败尝试不利:
hadoop job -fail-task <task-id>

8、yarn资源管理器相关
yarn application -list
如需杀死当前某个作业,使用kill application-id的命令如下:
yarn application -kill application_1437456051228_1725

参考博客

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 目的这篇教程从用户的角度出发,全面地介绍了Hadoop Map/Reduce框架的各个方面。先决条件请先确认Had...
    SeanC52111阅读 5,703评论 0 1
  • 一、系统参数配置优化 1、系统内核参数优化配置 修改文件/etc/sysctl.conf,添加如下配置,然后执行s...
    张伟科阅读 9,182评论 0 14
  • 摘自:http://staticor.io/post/hadoop/2016-01-23hadoop-defini...
    wangliang938阅读 3,723评论 0 1
  • spark-submit的时候如何引入外部jar包 在通过spark-submit提交任务时,可以通过添加配置参数...
    博弈史密斯阅读 7,851评论 1 14
  • 多年前,我刚上大学,以为周围的同学都是和自己一样,刚走出家门,是涉世未深的小白。现在常常回忆起来,对当时自己的幼稚...
    果枚阅读 4,200评论 2 5