240 发简信
IP属地:北京
  • Resize,w 360,h 240
    upsert-kafka结合hudi使用,第一次数据读取回测流不准确

    1.问题:upsert-kafka结合hudi使用,第一次数据读取回测流不准确; hudi版本:采用hudi新版本0.11.0-rc3版本; 数...

  • Resize,w 360,h 240
    hudi做ETL大数据量情况下聚合数据不正确问题分享

    1.问题:17W明细数据批量导入hudi,经过路径mysql->hudi ods表->hudi dws表->mysql 的运算后,发现sink到...

  • 3.数据中台-规范化建设-数据定义规范

    《数据定义规范》 上节我们深入分析了痛点产生的原因,并规划了阶段式的整体解决方案,主要是:从管理组织规范->数据定义规范->建模规范->研发...

  • 2.数据中台-规范化建设-整体方案

    《整体方案》 我们回顾上个章节所阐述的痛点,提炼下来,主要是:数据不统一,数据重复建设,数据定位困难,深入分析原因,可归纳为如下几点: 1.管...

  • 1.数据中台-开篇

    Hi大家好,我是大樊,一枚热爱数据的,具有8年开发经验的程序猿,目前就职于一家中型互联网公司,主要负责部门内的数据仓库建设,历经多年时间,从0...