All is from <产品经理数据修炼30问>
数据的处理流程
(1)可以直接使用原始数据吗?No,需要【数据处理层】
从表面看,数据处理层的主要工作就是不停地从接入层获取数据,加以归并和计算
~ 数据逻辑计算 ~
(2)任务调度平台:对于step 1中的处理动作进行自动化处理!需要【自动化处理引擎】,也就是任务调度平台
任务调度平台的主要任务:定时执行编写的脚本,使得数据按照我们期望的方式被周期性地处理。
(3)任务调度平台的组成
脚本管理:提供脚本上传、共享、下载和删除的功能,供使用者维护用于数据处理的脚本代码
任务管理:配置任务,告知任务调度平台以怎样的节奏和方式执行数据脚本,以实现我们期待的周期性自动处理。
任务依赖管理:严格按照先后顺序执行的多个任务,比如任务B和任务C依赖于任务A所处理的数据。
调度监控:汇总和监控调度任务的执行状态
权限控制:根据使用者的身份,限定可使用的资源、模块和各模块的表现行为。
(4)纵表 & 横表(宽表?)