Spark on Yarn 查看日志

        一直以来都是在UI界面上查看Spark日志的，但有时想在终端里面查看某个job的日志该怎么看呢？今天特地查了下资料，找到如下命令：

1、查看某个job的日志

yarn logs -applicationId application_1503298640770_0230

2、查看某个job的状态

yarn application -status application_1503298640770_0230

3、kill掉某个job（直接在UI界面或者是终端kill掉任务都是不对的，该任务可能还会继续执行下去，所以要用如下命令才算完全停止该job的执行）

yarn application -kill application_1503298640770_0230

最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容

  • yarn应用场景基本架构和资源调度
    YarnYarn产生背景：Yarn直接来自于MR1.0MR1.0 问题：采用的是master slave结构，ma...
    时待吾阅读 5,913评论 2赞 23
  • Spark on yarn遇到的问题
    1. spark提交后一直循环accepted spark on yarn提交任务时一直显示ACCEPTED，过一...
    九七学姐阅读 4,554评论 0赞 3
  • 感赏自己慢慢走出阴霾004
    感赏今天天气真好，关在家里的我终于踏出家门到公园走走，我把录音传到手机上，一边走，一边听，一边听，一边把重要的东西...
    思言悟语阅读 333评论 0赞 0
  • 如此幸福
    今天我打算到天台睡觉，把床搬出来。相信今晚大家又开起空调盖着空调被，房间里面确实热的。但是如此大的风为什么不享用呢...
    hard_d724阅读 158评论 0赞 1
  • 30岁，你老了！
    ⊙ 原创 lala凤 有一天，我突然发现自己就这么老了，很多事情没来得及去做，就老了。 当我看着那一群比我小10来...
    拉拉凤阅读 406评论 0赞 0