第一章 笔者自序
笔者介绍自己从入职阿里巴巴后的工作
- 2009年:初识数据-被其他部门认为数据就是做报表
- 2009年~2011年:的工作状态为
- 2012年2月份:接到统一370个API的工作,提出必须优先对背后数据实现标准化和规范化的建议,得到支持
- 2012年6月份:
- 数据标准和规范:onedata
- 统一服务:opneAPI(oneservice前身)
- 深入服务:傻瓜平台、生意参谋
- 2013年4月 :进行淘宝天猫数据公共层
- 2014年 : onedata 引起高层关注
- 2014年4月 :阿里巴巴数据公共层建设项目启动
- 一期:全局架构
- 二期:18个子项目
- 三期:9个子项目,6大技术领域
- 2015年:阿里巴巴数据公共层取得阶段性成果
- 2015年12月7日:数据中台团队成立
第二章 云上数据中台之顶层设计
2.1.1 国内外大数据发展
- 本章作者先介绍了国内外大数据发展
2.1.2 如何利用大数据
- 简单举例了几个大数据应用场景,如
- 基础建设方面的:
- 预测-景点拥挤程度,
- 化零为整-小额投资借贷
- 机制方面的:
- 用输入规划输出的-拼车路线
- 代替人工的-图像识别,题库
- 思维方面的:
- 用户画像-DMP
- 对象评估-用户评分
- 场景虚拟技术方面的:
- VR
- 无人自助服务
- 基础建设方面的:
2.2 阿里巴巴大数据主张
- 坚信大数据有超能力
- 简单介绍三one体系
- oneData:统一数据
- oneEntity:统一实体
- oneService:统一服务
2.3 如何实现云上数据中台
- dwd&dws 不因业务、及组织架构变动而轻易变动
- 萃取中心 统计指标的精华数据,行为标签、关系等
- 萃取中心举例 消费者数据体系、企业数据体系、商品数据体系、位置数据体系
第三章 数据中台建设过程
3.1 执行计划
3.1.1 现状及设想
- 现状略
- 设想
- ODS单一团队负责,其他团队无权复制
- DWD+DWS由统一团队负责抽象,核心业务必须有单一团队负责
- ADS由业务团队或深入业务的数据团队负责自由建设