1、记录丢失 如发邮件记录，如果两个系统中的事件ID相同恰巧，则可能有记录丢失 如何解决？ 2、重复消费某条记录，如果消费不具有幂等性，可能错误...

ES查询用例 单个index 1、全文检索 多字段查询 2、地图搜索 地图字段查询，依赖数据中包含带有geo_location的字段。 3、聚合...

可选引擎： 1、 kite 框架 适合少量数据（多少？） 用xml表是映射关系； 适用于结构化数据(行存储的数据)； 用于前端数据导入； 三要素...

1、写入模式： 全量 增量 2、修改模式： 修改属性值 添加备注 添加多媒体 3、读取模式： 全文检索 主键查询 模糊查询？ drill dow...

1、人口库： 人员基本信息表：身份证【主键】，电话号码【option】 2、通信库 电信表： 电话号码【主键】，身份证【required】 通话...

去除数据中的重复，并将剩余部分转换成标准、可接受格式的处理过程。 1、数据问题 数据缺失 通过手动或规则填充数据； 清除列； 无效数据 错误数据...

1、类型 1、Structured Data 结构化数据有明确的数据格式定义，有哪些字段，各个字段的数据类型是事先定义的。 SQL是标准的处理语...

1、Data Consolidation： 数据整合 2、Data Integration： 数据集成 2.1、概述 将分散的数据源的数据，逻辑...