240 发简信
IP属地:北京
  • HDP3 集成 TEZ_UI

    HDP3以上的版本移除了TEZ view,收集网上的资料,自行部署集成 tez_ui 页面部署 准备一个tomcat 修改tomcat默认端口为...

  • k8s-nginx配置的热加载

    我们的k8s集群已经将nginx的配置使用configmap挂载到nginx镜像中,实现了配置的外部注入;nginx本身支持nginx -s r...

  • hue连接HDP的hive报HiveSQLException: Invalid OperationHandle: OperationHandle [opType=EXECUTE_STATEMEN...

    hive版本:1.2.1000.2.6.5.0-292hue版本:4.2.0 报错信息:HiveSQLException: Invalid Op...

  • Resize,w 360,h 240
    spark thrift server 查询日志留存

    spark thrift server的web ui在运行时可以看到sql查询的提交用户,执行sql等信息 但是当这个实例停掉或者异常终止以后,...

  • 解决HUE使用sparksql查询无法显示元数据的问题

    要解决的问题 解决方法:1、首先你的hive肯定要能用,我们就是将spark的元数据查询请求转换为hive的元数据请求2、操作步骤: 3、不需要...

  • alluxio安装 集群模式

    alluxio1.8.0版本集成hive metastor时存在连接耗时较长的问题,更换1.7.1版本后正常,安装步骤相同 官方安装文档:htt...

  • 常用RESTful调用接口

    ambari http://{ambari-server-host}:8080/api/v1/clusters api文档:https://gi...

  • 通过yarn timeline server api查询tez任务的运行数据

    这里面最坑爹的就是tez记录在timelineserver中的entity_type值:TEZ_DAG_IDtimelineserver并没有接...

  • CM监控及短信告警

    需要安装cm-api这个python依赖:https://cloudera.github.io/cm_api/docs/python-clien...