KAP v2.5新特性之智能化的建模

为什么企业需要快速建模的能力?

数据仓库作为一种数据环境,具有面向分析、提供管理决策支持的重要作用。而在数据仓库中,多维数据模型能够满足大多数企业的数据分析需求——它提供了多角度多层次的分析应用,比如基于时间维度、地域维度等构建的销售星形模型、雪花模型,可以实现在各时间维度和地域维度的交叉查询,以及基于时间维度和地域维度的细分。

传统的多维模型建模,具有冗长而复杂的特点。首先要选择业务过程,其次声明数据粒度,之后确定维度字段和事实字段。其中,由于业务过程是由很多微观的业务活动组成的,比如注册用户、获得订单、开具发票、接受付款、处理索赔等等。因此,建模人员需要耗费大量时间去理解和组织业务活动,这样创建的模型最终才能回答业务分析的具体问题,为管理决策提供权威的数据支持。

而在当前的信息时代,业务的快速反应能力决定了很多企业能否把握准确的时机,甚至决定了很多企业在关键时刻的生死存亡。比如零售行业,尤其是电商方向的企业,管理决策层需要关注引起利润变化的因素并迅速调整的营销策略。因此,快速建模或者调整数据模型才可以支持这类的业务快速反应能力

KAP 支持业务的快速反应

KAP 支持标准SQL接口,通过JDBC和ODBC无缝对接主流BI产品,完全匹配商业分析师熟悉的分析模式。分析师无需了解大数据底层架构,可以在海量大数据上进行交互式的分析,释放了大数据生产力。

不同的企业中,常用的业务分析问题是基本固定的,比如零售行业的常见问题“同样的营销模式下,不同渠道的利润差别有多大?”。而这些常用的业务分析问题都已经转化为固定的的查询报表、成体系的SQL查询语句或者商业分析师相对稳定的查询模式。

KAP v2.5支持自动创建合适的模型,减少了建模人员了解业务细节的时间成本,消除了建模人员与业务人员的磨合成本,大大增加了企业的快速反应能力。

KAP v2.5的自动建模之路

具体来说,KAP v2.5 增强了智能化的建模,模型推荐支持通过SQL自动生成模型,Cube优化器支持多种存储优化策略。另外,新增了通过SQL验证模型的能力,支持对业务分析需求变化的快速响应。

模型推荐

模型从无到有的部分,最考验建模人员对业务逻辑和查询需求的理解。传统多维模型的建模耗时耗力,而且对最终所创建的模型是否能回答业务查询无法保证。KAP v2.5支持通过SQL自动生成模型。导入源表后,即可通过输入SQL自动创建模型,实现了从SQL到模型的一键生成。以查询SQL为依据,自动生成的模型可以准确的回答这些查询SQL。

多策略的Cube优化器

Cube是数据仓库中一个经典的概念,是多维模型的一个形象的说法。传统OLAP 技术下,Cube虽然能存储大量维度,但随着维度增加, Cube所需要的存储空间也会呈几何倍数增长。比如一个Cube中包含了N个维度,那么这N个维度将生成2N 个维度组合。这些成倍增长的维度组合中,有很多在整个Cube的生命周期里都不会被使用,同时由于维度组合数爆炸而带来的存储膨胀、构建时间冗长、甚至查询性能由此而下降的弊病。

为了解决这个问题 KAP 提供了多种场景下,对Cube的优化设置,帮助用户筛选出真正会被使用到的 Cube维度组合,避免大量存储资源被无效的维度组合耗用,缩短构建时间。优化设置包括衍生维度、聚合组、联合维度、层级维度、必要维度和Rowkey等。

结合不同的业务场景,合理的使用这些优化设置能够使数据建模事半功倍。根据这些优化设置的方法,商业分析师可以定制精确满足业务场景的Cube,避免Cube爆炸的问题。

Cube优化器提供了多种优化策略来满足不同的业务场景, 其中模型优先策略,充分利用数据自身的逻辑关系优化Cube,满足灵活查询场景;业务优先策略,定向加速指定SQL,用最小的存储成本支持常见的报表查询模式;综合优化策略,支持以上两种需求,满足了多种优化场景。

快速验证SQL

同样,在传统的OLAP 技术下,数据模型需要在构建后才能得到验证。每一次模型从设计到验证,需要付出很大的时间成本与资源代价,滞后的模型设计反馈难以满足当前快节奏的市场变化。

KAP v2.5支持的快速验证能力,极大地加速了模型反馈。无需构建,建模后即可快速验证模型是否满足业务查询SQL,快速响应业务分析需求变化。

总结

在当前的信息时代,业务的快速反应能力决定了很多企业能否把握准确的时机,KAP致力于帮助更多企业把握时机,通过支持以SQL为中心的自动建模,支持模型设计快速验证,以响应瞬息万变的市场需求,实现更多企业的商业价值与使命。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,390评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,821评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,632评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,170评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,033评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,098评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,511评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,204评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,479评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,572评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,341评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,213评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,576评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,893评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,171评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,486评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,676评论 2 335

推荐阅读更多精彩内容