产品经理眼中的数据仓库

作为一名数据产品经理,即使我们不写程序,也需要知道正在运行的大数据系统中,是如何一步步的实现可视化展示的。不仅能指导在新产品规划中提前基于典型业务场景、异常业务分析(如核心客户流失对年度营业收入的影响分析、某次线下活动过后出现一批从未出现过的新线索)、客户最为关心的经营指标波动等等的产品功能设计,也能在需求汇报或原型讲解时,以事实案例为依据、数据为支撑来提升可行性和上线后的成功概率。甚至在产品投入正常后,能通过excel、Tableau等可视化工具查看超出指标阈值的业务,并进行初步的数据探测,领先于滞后的财务指标洞察问题,提供解决方案,指导产品迭代和业务提升。

以下是产品经理眼中的数据仓库架构

图中显示的整个数据仓库环境包括操作型系统(图中的操作层)和数据仓库系统(图中的数据仓库、数据集市、应用)两大部分。

操作型系统的数据由来自各个系统或产品里的业务数据组成,比如企业已有的系统,表格,还可能是用网络爬虫抓取来的互联网数据等。数据表现形式可能是结构化、半结构化、非结构化的。这些数据经过抽取、转换和装载过程进入数据仓库系统。这里的数据将被以保证最重要的和最频繁的查询能够快速执行的方式构建。

而从数据仓库到数据集市这一过程就是常说的业务建模。业务建模一定是基于职能部分和业务部门的数据使用需求开展。业务建模过程中,有两个最重要的概念,事实表和维度表。事实表是存放具有度量结果的详细值或事实的表;维度表是存放各类属性的表,像地区、城市、项目类别、客户类别等。而基于这两种表的关系,可以把建模分成星型模型和雪花模型。

星型模型:模型里的每一个维度都直接与事实表中的数据直接相连,性能好;

雪花模型:有一个或多个维度表没有直接连接到事实表上,而是通过其他维表连接到事实表上时,其图解就像多个雪花连接在一起一样,雪花模型的好处是冗余少;

建立数据集市的好处主要有:

安全性:每个部门,甚至每一个角色都可以完全控制他们自己的数据

一致性:因为每个数据集市的数据来源都是同一个数据仓库,有效消除了数据不一致的情况。

重要的一点是,所有的报表工具、BI工具或其他数据分析应用都可以直接从数据集市查询想要的数据,而不是直接查询数据仓库。

©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,222评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,455评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,720评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,568评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,696评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,879评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,028评论 3 409
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,773评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,220评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,550评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,697评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,360评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,002评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,782评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,010评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,433评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,587评论 2 350

推荐阅读更多精彩内容