240 发简信
IP属地:辽宁
  • Resize,w 360,h 240
    土味儿说明数据治理-主数据&参考数据(参考数据)

    一,前言 主数据和参考数据在我们数据开发或者JavaWeb开发的同学都有经常接触,并且是大量的使用和分析场景,在数据治理中提到的一些专业名词在数...

  • 0)Hive解析Ngxin日志中的时间

    时间格式 :04/Jun/2021:22:11:18 +0800这个时间是个并非Nginx的标准时间格式 ,原始的为 :[04/Jun/2021...

  • sparkStreaming使用zookeeper管理KafkaOffset方案

    天地四方皆江湖,世人聪明反糊涂。名利场上风浪起,赢到头来却是输。----侠客行 先上maven依赖 先来个sparkStreaming的启动程序...

  • FlinkAPI硬核推荐

    因为最近项目需求,需要使用Flink框架做一个实时数仓,其中用到了kafka,redis,hbase,mysql,flink.但面临的问题是我没...

  • CDH6.2/6.3安装Flink

    Flink安装包下载地址 接下来只需三步操作 然后再CDH集权检查新的parcel就会出现flink了如果检查不到新的 parcel,就把CM重...

  • 大数据sqoop导入导出及环境变量配置

    1,检查是否装了JDK,JDK版本建议(必须)在1.8或以上,如果没有装JDK,sqoop提交运行的时候,使用的jre会报错 2,检查/etc/...

  • 开发环境搭建CDH

    CDH安装笔记 安装CDH我们需要做的几件事: 温馨提示:不要一步一步照抄 1 ,选择centos对应版本的CDH安装包(我选择的系统是: ce...