航司的DevOps & DataOps & AIOps

前言

        数字化转型大潮中,常常说到DevOps,但是其并不是数字化转型所特有的。从一个高度及敏捷的研发团队的角度,其是必要的技术组成部分,甚至不在于是否用不用敏捷。并随着大数据的特有应用,衍生出DataOps;同时由于互联网相关应用等的大规模分布式的使用,及虚拟化、容器化等等的海量集群的应用,AIOps也被冠名了。


小运维与大运维

a. 统一及集中的部门和团队的成立,就是为了提供集中/一致/协同的管理支持,提高专业化水平。

b. 但是其不能永远站在后面,被动的接受服务请求。

c. 其专业性和资源集中性要渗透到立项,开发,运维等的全生命周期中,协同应用及系统建设和后续工作。

d. 不管是自己内部资源,还是外部资源,第三方服务及产品,团队应是组织与基础设施及平台服务的唯一对接中心。


没有边界的高价值存在

a. 应用和系统永远是建设在基础设施及平台服务之上的。

b. 从立项开始,到设计及实施,一定要考虑资源的现状,人员的能力,及日后运维的全部依赖因素。

c. 一个高效,全面,全栈,敏捷,专家/有经验的软硬件资源平台,管理平台,工具箱,运维包,以及相关规范手册终将节省大量的人财物时间,为企业数字化转型提供最有力的支持。

d. 如何充分利用已有资源和职能范围,提升价值/创造价值/改造价值,尤为重要。


PreDev ► Dev ► Data ► AI Ops

a. 新传统应用及系统开发的IT技术日新月异,同时开源化和轻量级等的使用,增加IT运维的压力。

b. DevOps要求的自动化/工具化/敏捷化还没有全部实现,企业数字化转型有提出更高的要求。

c. 大数据和数据智能的几何级数的增长,更需要用工具代替人,用全新的思维和方法醍醐灌顶。

d. 更大挑战和要求还在AI,通过算法替代固定的模式和流程,从而上升到更高层次的“自动化”。


从DevOps到DataOps

a. DevOps侧重于:工具,自动化,开发及运维团队,运维是系统设计的一部分,协同。

b. DataOps侧重于:数据,可视化,可追踪,专业工具,数据分析工程师。

c. DevOps是与企业数字化转型,IT敏捷及迭代开发等相关联的。

d. DataOps是与专门数据处理相关的体系。


DevOps

概述

a. 基于过往大型企业项目,国外航司及IT服务公司经验,运维是一个技术活,需要专业团队。

b. 往往是多个角色团队的协同。

c. 并超越单纯硬件及网络的运维支持,上升到企业级及通用的服务化支持。

“开发平台即服务”与应用/系统开发团队协同

IaaS及PaaS,和Microservice等的出现,要求IT基础设施和服务,一定要能够支持。

development Platform as a Service (dPaaS)则普遍变为一种潜在IT运维团队的增值和高价值服务,并牵引开发向规范化和敏捷化发展。

后台作业可视化,自动化,管理工具化

以LH的Customer Loyalty为例,航司大量的日常工作将集中在后台作业及批处理文件的处理上。

在开发完毕交付的作业任务的管理,不仅仅只是属于作业实例的驱动,更关键是一整套任务链的协同。

分布式集中日志及运维服务升值

结合CO/UA及DL交付经验,一整套集中的日志系统,将会对运维和系统管理提供强有力的支持。

企业级监控框架及平台

a. 根据若干航司的案例,人财物时间的投入,将是后续运维精力优化的关键,尤其是管理方面。

b. 但是必须根据项目范围,系统规模,以及NFR需求关注点,指定针对性的监控目标,而不是一应俱全的满足4个层面。

c. 更关键的是某些层面,譬如连通性及系统效能等监控属于统一的职能范围和管理主体。

虚拟化容器化云化运维

a. 根据航司电商与互联网电商的对比,关键IT的差距就是对于虚拟技术的使用。

b. 通过构建标准镜像,规范化第三方软件应用的使用和技术要求。

c. 通过容器化的投放,充分发挥软硬件资源,避免不必要的浪费。

d. 通过脚本化的规范要求,协助开发团队在实施中就为未来运维提供基础。

参考及实绩


DataOps

a. 技术大数据技术堆栈,和实际操作要求,一整套以数据流处理为核心的平台服务是必须的。

b. 在错综复杂及海量的开源软件构件的大数据IT基础之上,找到一组相对稳定和兼容的框架软件集是相当困难的。

c. 所以尽量采用相对官方的大数据平台明智之举。

d. 然而在之后的大数据开发过程中,对于软硬件资源的使用支持将是更严峻的工作。


AIOps

a. 算法的IT运维(Algorithmic IT Operations),是更深层次的需求,并且已经存在。

b. ITOA到AIOps,及AIDevOps的转变。

c. 最优实践留给BAT和JD他们吧。


结论

        不管航司航企航旅推行怎样的新政,只要定位好自己处于那种状态(PreDev ► Dev ► Data ► AI Ops),则可以逐步融入项目管理和开发规范的前提下,逐步制定、摸索、推进相应的Ops工作。但是对于DataOps,必须因地制宜,明确是否自己的产品及应用有数据类开发运维的特质和真实诉求。然而对于AIOps,个人认为普遍企业至少5年是根本没有应用的可能,即使是比较大型的航司航企。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,884评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,755评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,369评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,799评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,910评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,096评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,159评论 3 411
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,917评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,360评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,673评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,814评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,509评论 4 334
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,156评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,882评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,123评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,641评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,728评论 2 351

推荐阅读更多精彩内容