SQL Client客户端 在开启SQL client客户端时需要指定sql_lib; 可以在conf/sql-client-defaults.yaml中配置默认的catal...
发简信
IP属地：上海
-
Flink容错机制-Checkpoints和Savepoints
一、Checkpoints的算法原理 Checkpoints是flink自动存储快照 1. Barrier(checkpoint分割线) 二、Savepoints（保存点） ...
-
实时数仓-Maxwell
一、Maxwell maxwell是有美国zendesk开源，用Java编写的Mysql实时抓取软件；其抓取的原理也是基于binlog 二、Maxwell与Canal的对比 ...
-
Spark或Flink实时消费难点1、精确一次消费 1.1 定义 精确一次消费（Exact once）：指消息一定会被处理且只会被处理一次；不多不少就一次处理。 如果达不到精确一次消费，可能会达到另外两种情况...
-
Clickhouse实践离线实践 主要业务：用户分析和敏捷BI数据导入：由外部事务保证的T+1离线数据 离线实践思路： 将数据根据业务逻辑使用Spark在Hive或HDFS将数据生成好，在HDFS上...
-
实时数仓-Canal介绍实时数仓中架构如下图： 实时架构主要数据来源有3块 日志文件（或设备上的心跳数据），由Flume或者Springboot程序直接写到kafka中 接口API，使用程序调用接口...
-
Clickhouse的特点
Clickhouse的特点 一，列式存储 IdNameAge1张三182李四223王五34 采用行式存储时，数据在磁盘上的组织结构为： 1张三182李四223王五34 行式存...
-
Clickhouse表引擎介绍
Clickhouse表引擎 表引擎是Clickhouse的一大特色，表引擎决定了如何存储数据，包括： 数据的存储方式和位置，写到哪里以及从哪里读取数据 支持哪些查询以及如何支...
-
influxdb
前言 influxdb是目前比较流行的时间序列数据库。 何谓时间序列数据库？什么是时间序列数据库，最简单的定义就是数据格式里包含Timestamp字段的数据，比如某一时间环境...
