“Application rejected by queue placement policy”异常解决

hive> select count(*) from kylin_sales limit 10;
Query ID = root_20181108175454_275f4f71-f877-43e0-8d51-b9b53a439a4b
Total jobs = 1
Launching Job 1 out of 1
Number of reduce tasks determined at compile time: 1
In order to change the average load for a reducer (in bytes):
  set hive.exec.reducers.bytes.per.reducer=<number>
In order to limit the maximum number of reducers:
  set hive.exec.reducers.max=<number>
In order to set a constant number of reducers:
  set mapreduce.job.reduces=<number>
java.io.IOException: org.apache.hadoop.yarn.exceptions.YarnException: Failed to submit application_154167062 YARN : Application rejected by queue placement policy
        at org.apache.hadoop.mapred.YARNRunner.submitJob(YARNRunner.java:336)
        at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:244)
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1307)

排查问题
1.上面的报错与队列相关
2.CDH yarn界面问题排查队列生成的样子异常


image.png

让我想到了集群动态资源池放置规则,我打开集群动态资源池配置的放置规则一看果然是因为无法创建资源池或者没指定队列造成的异常。进行如下配置即可。
image.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 1.ios高性能编程 (1).内层 最小的内层平均值和峰值(2).耗电量 高效的算法和数据结构(3).初始化时...
    欧辰_OSR阅读 29,793评论 8 265
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 174,795评论 25 709
  • 这些天国家正在进行环保大督查回头看,晋城市城区政府也被环保部约谈。环保势头确实越来越严峻,既要金山银山,也要绿水青...
    荆公子阅读 205评论 0 0
  • 这个杀手不太冷,里昂用自己的生命去守护帝,我无法分清这是哪一种爱,爱情、亲情都不是,却是深情的爱,
    jassica_guo阅读 188评论 0 0
  • BINARY 运算符将紧随其后的 string 转换为 二进制字符串。主要用来强制进行按字节进行比较(byte b...
    陈煦缘阅读 14,249评论 0 1