地区数字化转型之数据连接与汇聚.md

数据连接

  1. 各行业数据、政府业务数据、地区城市运行数据、互联网数据,从离线、分散、零星采集,转向随时在线、逻辑集中、统一采集。
  2. 不同类型、不同协议的物联网感知设施充分部署,促进物理空间、网络空间、社会空间边界融合下的数据流动,以信息资源调配物质资源,改善社会资源,打通虚实世界,形成感知-认知-操控-反馈的闭环机制;

数据汇聚

  1. 在数据持续连接基础上,不断丰富形成数据汇聚三类层次;
    • 全量数据:物理空间、网络空间和社会空间数据的集合,
    • 全域数据:在全量数据基础上,增加时间维度,形成时空数据,增加事件的轨迹、演变过程;
    • 全息数据:在全域时空数据基础上,增加数据之间的关联关系,形成主对象为核心的,数据融合、关联网络,打破因数据割裂造成的天然孤岛,形成关联数据的叠加价值。
  2. 数据汇聚的目标成效,是确保随时可进行抽取、关联与分析。与汇聚的物理地址无关,因为数据汇聚既可以逻辑集中,物理分散存储,也可以物理集中存储。
  • 前者,务必要按照统一规范和标准,对分散在不同物理地址的数据独立清理,形成统一数据格式,随时可供程序调用。这种方式要求各分散单元有数据清洗能力,或者通过第三方统一进行清洗。
  • 后者,可以将所有数据库统一上云,形成天然的物理集中,不过云中存储的数据依然属于不同租户,每个租户存留的数据,并不天然互通共享,依然还需经过清洗处理后,方可统一调度。
  1. 一般而言,逻辑集中物理分散存储更符合数据处理方向。但实际操作中,尤其是地方政府,往往采用统一上云的方式集中存储,由专门的数据资源机构,如大数据资源管理局等,进行统一加工处理,这种方式更有利于工作推进,否则分散存储在不同物理地点的数据,依然被各部门独立把持,无法发挥数据效益。

贵州案例 :明确集中存储更有利于数据统一调度;
上海案例: 通过对数据资源使用的地方立法,要求全量数据的集中归集;

  1. 数据汇聚过程中,有两类做法,
  • 第一类是构建全量数据资源目录,划分其中一部分作为可共享的资源目录,对这部分数据资源进行独立存放。
    • 优势是数据资源目录梳理有基础,对业务的理解和依赖相对较小,每当有新业务和新共享需求时,再定期更新共享资源目录。
    • 劣势是全量数据的梳理工作量大,可共享的资源目录更新不及时。
  • 第二类是按照业务主对象,形成多个主数据库,破解过去数据属性被不同部门、不同行业天然分割的困局。e.g 人事数据,包括党建关系、调动关系、职称评定、项目业绩等,可以以单一的个人身份作为主对象,构建人事主数据库。
    • 优势:主数据库天然有数据之间的依存关系,与业务息息相关,
    • 劣势:各业务部门要明确形成主对象档案,对业务部门提出专业要求。

数据分析

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,014评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,796评论 3 386
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,484评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,830评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,946评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,114评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,182评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,927评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,369评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,678评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,832评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,533评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,166评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,885评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,128评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,659评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,738评论 2 351

推荐阅读更多精彩内容