国产ETL工具Beeload&BeeDI 产品 独特功能之一 实时数据同步
一、实质项目应用中症结：
1、开源kettle 无实时数据同步功能，使用企业必须手工SQL语句实现，开源中的无形成本。
2、一体化平台需写脚本、存储。或者直接通过拷贝磁盘、拷贝流量等方式实现增量数据捕获。当前数据同步诸多难题：数据异构严重、对数据库干扰频繁、数据量巨大、数据同步的实时性不高、数据的一致性无法保证、跨网络边界交互、入库后不可直接使用、维护成本过高等。
二、我们需要实时数据同步场景
在数据实时同步中涉及多级汇总、多级分发、多级同步、实时同步
三、实时数据同步 概述
关于数据同步主要有两个层面的同步，一是通过后台程序编码实现数据同步，二是直接作用于数据库，在数据库层面实现数据的同步。
通过程序编码实现数据同步，其主要的实现思路很容易理解，即有就更新，无则新增，其他情况日志记录，就不做过多的介绍，这里主要讲述的是第二个层面的数据同步，即在数据库层面实现数据同步。
数据库层面的数据库同步主要有四类增量同步处理机制：时间戳、触发器、日志解析、差异更新。
北京灵蜂ETL工具产品拥有的全量同步和四类增量同步机制。可以快速的实现数据同步，无需编写任何代码，图形配置即可。
