在电商平台落地大数据应用的6个场景2类服务12个框架

来啦,请坐。

我是老杨,这是我的《数字化研发管理》书籍的前奏,我带你稍微见识下其魅力。

如果你有强化管理能力,量化技术产出,提升技术效能,打造技术团队等需求,那么这套课程会为你揭开技术管理的神秘面纱,可以让“妈妈再也不用担心你的工作了”。

这是《数字化技术管理的方法和实践》第十一讲,技术创新的尝试一,大数据应用。

一句话解释下:作为技术团队,要每一天都想着创新,否则和咸鱼有什么分别?而大数据应用就是技术创新很有效的方式。

细心的同学会问:“这是技术管理的专栏,为何讲大数据应用?你脑子瓦特了吧?”

好吧,我来从技术汇报的两个场景讲起,来帮你分析下:

场景一,你激情澎湃的讲技术少花了多少多少钱,提高了多少多少效率;

场景二,你慢条斯理的讲技术创造了多少多少价值,赚了多少多少钱;

这俩哪个带感???我想很显然是场景二了,技术的终极目标之一就是让技术成为业务,让技术除了花钱之外还能够产生价值,也就是传说中的技术驱动业务。

无论你信与不信,这种化被动为主动的操作是非常必要的。那么这波666的操作该怎么去落地呢?其实第一种方法就是耳熟能详的大数据应用了,所以归根究底还是为了把技术团队管理好,clear?

那接下来直接上干货了,老杨把在电商中的大数据应用从产品和技术两个方面详细拆解下,给你做个参考,对你去落地大数据应用并让技术产生价值会有些许帮助。

我发现大数据的价值主要体现在数字化经营、精细化运营和个性化产品这三个方面,为了支持这三个方面业务,我倾情总结了一张产品架构图,告诉你该构建什么产品平台、产品模块以及提供什么数据服务,走着。

大数据产品架构

从上往下分为4层,依次是:用户层、场景层、工具+服务层和基础层。

1.用户层:是说大数据的使用者是用户、客户、运营人员和技术人员,当然也包括公司的管理层,可以说大数据就是一个辅助经营、指导运营以及支持全面的一个存在,这么重要的一个存在自然需要充分发挥其价值了。

2.场景层:是说用户在各种场景,进行的各种操作要么使用到大数据的服务,要么对大数据有反馈,总之大数据贯穿在各种场景中。

3.工具+服务层:是说用户通过数据Portal和数据API去使用大数据服务,那最核心的就是用户类的和商品类的服务了,如用户的特点是什么,行为是什么等。

4.基础层:是说技术上是靠什么支撑数据服务的,当然首先必须把数据采集到,然后进行存储,之后才是数据的计算、分析、建模、挖掘等,形成可以使用的数据,通过数据API提供出去。

那么产品架构清楚了,还是要落地到技术上去实现,我又倾情总结了一张技术架构图,告诉你该怎么去实现,该搭建什么样的架构,该使用什么技术平台,再来。

大数据技术架构

从上往下分为4层,依次是:服务层、计算层、存储层和采集层。

1.服务层:是说给用户使用的东东,一般就是一个数据Portal,如Tableau;还有数个数据接口。

2.计算层:是说数据的离线分析用Hive,近实时分析用Spark Streaming,还有一些聚类、分类等算法用SK learn等,经过这些计算、统计、分析之后,数据就会更加有血有肉。

3.存储层:是说全量源数据、细节数据以及经过清洗的数据,存储在HDFS中。

4.采集层:是说业务数据存储在mysql中,各种行为数据、各种补充的业务数据、各种技术类的数据都存储在日志文件中。

最后,还是要强调一点,大数据技术的发展基本上是日新月异,技术架构也是要持续迭代,不用过多的追求新,但一定要追求卓越,持续提升大数据技术的价值,支持、驱动业务发展。

好,大数据应用告一段落了,还有一种技术创新很有效的方式就是人工智能了,这也是下一讲的主题,欢迎持续关注,下次见啦。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 220,063评论 6 510
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,805评论 3 396
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 166,403评论 0 357
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,110评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,130评论 6 395
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,877评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,533评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,429评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,947评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,078评论 3 340
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,204评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,894评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,546评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,086评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,195评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,519评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,198评论 2 357