云超融合数据中心 CloudFabric

随着云计算、大数据、人工智能等新一代信息技术的快速发展,数字技术已经渗透到我们日常生活的方方面面,同时也改变了所有行业。数据中心,将算力源源不断地输送给数字世界,逐渐成为云计算、工业互联网、人工智能的万能粮仓。

咱们今天就来聊聊这个“万能粮仓”,云超融合数据中心网络 CloudFabric

数据中心网络服务于云应用、计算资源与存储资源。三大服务对象的变革正在驱动数据中心网络向以太化演进:

• 云化升级:云化加速浪潮之下,企业 IT 架构从本地集中式向云端分布式、甚至多云分布式演进。开放以太架构天然可被云灵活调用,具备良好的互通性、弹性、敏捷性以及多租户安全能力,已经成为通用计算网络的压倒性协议。

• 存储全闪存化:随着机械硬盘向全闪存升级,存储介质的读写性能提升了百倍。业界主流FC网络使用16G/32G带宽,不满足全闪存高吞吐的需求,带宽高达 400GE 的以太网成为新一代存储网络的事实标准。

• 计算单元去 PCIe:业界 CPU/GPU 厂商正在通过去 PCIe 总线突破总线的速率瓶颈,直接出以太口来提供更高算力。

一、数据中心网络向全以太化演进

在云计算时代,通过数据中心所承载的手机APP、智能分析、企业办公等新型应用正在改变企业的开发、生产及运营模式。

在跨DC双活存储网络方案中,以太网长距丢包率大于0.2%,不满足存储绝对0丢包的需求。同城70公里的双向时延高达1ms,DC 内和跨 DC 时延相差100倍,短距随着例如银行进入Bank4.0时代,两地三中心向多云多数据中心发展,线上金融交易增长迅速,金融业务逐渐上云。金融云未来9年复合增长率预计18.34%,数据中心建云联云成为刚需。

调优算法的流量调优策略容易滞后。


二、融合数据中心三大资源区

当前一些新兴的应用,如区块链、工业仿真、人工智能、大数据等,基本都建立 在云计算的底座中。近些年,企业各类业务上云的步伐不断加速,云可以提供按需自助服务、快速弹性伸缩、多租户安全隔离、降低项目前期投资等价值优势。另外,在企业的数字化转型中,以金融和互联网企业为代表,大量的应用系统逐 渐迁移到分布式系统上,也就是通过海量的 PC平台来替代传统的小型机。这么做带来了高性价比、易扩展、自主可控等好处,但分布式系统架构同时也带来了服务器节点之间大量的网络互通需求。

以太网已经成为云化分布式场景中的事实网络标准:

以太网已具有很高的开放性,可以与各种云融合部署、可被云灵活调用管理。

以太网具有很好的扩展性、互通性、弹性、敏捷性和多租户安全能力。

以太网可以满足新业务超大带宽的需求。

以太网从业人员多,用户基础好。

而传统数据中心高性能计算使用的 IB 网络,以及集中式存储使用的 FC 网络,生态封闭,资源割裂,演进缓慢,已无法匹配云化的发展诉求。根据 IDC 数据显示,近年来 FC 和 IB 市场逐步萎缩,数据中心的云计算化趋势助长了对以太网的需求,以太网是当前以及未来主要的数据中心内部网络互联技术。

总的来说,IT 架构层面:从本地集中式走向云端 分布式。数据中心内存在三大资源区:通用计算区、高性能计算(HPC)区和存储区。

三个区域的逻辑图

通用计算区:与数据中心外部的用户对接,提供指定的应用服务。这个区域中的 服务器大量使用虚拟化、容器等技术,形成灵活的资源池来承载应用。本区域中的网络被称为应用网络、业务网络或前端网络,当前部署的是以太网。

高性能计算区:配备了专用的高性能单元(如 CPU、GPU)的服务器,完成指定 的高性能计算任务或 AI 训练。这个区域中的服务器一般很少使用虚拟技术。本 区域中的网络被称为高性能计算互联网络,当前部署的是 IB(InfiniBand)网络。

存储区:采用专用的存储服务器,对各类数据进行存储、读写和备份。本区域中 的网络一般被称为存储网络,通常部署的是 FC(Fibre Channel)网络。算力持续稳定的输出,离不开三大资源区的相互配合。作为联接数据中心各类资源的大动脉,数据中心网络承载着保障数据高效流通的职责。


数据流图

当前,通用计算区部署的传统以太网、高性能计算区部署的IB网、存储区部署的 FC 网,是三张异构网络,他们协议各异、架构割裂,带来了运维困难、专网生态封闭、成本高、无法实现全生命周期管理等问题。数据中心里这三张网络的融合,成为算力提升的必然要求。

很多厂家都提出超融合数据中心网络以全无损以太网来构建新型的数据中心网络,使通用计算、高性能计算、存储三大业务均能融合部署在同一张以太网上,同时实现全生命周期自动化和全网智能运维。

三、双活全以太存储网络实践

双活全以太存储网络,大幅提升存储性能。

在分布式存储场景,基于现代高性能数据中心交换机和相关智能无损算法,可感知流量的变化,并基于海量存储流量样本持续进行 AI 训练,智能动态地调整交换机的队列水线,实现亚秒级流量精准控制,确保100%吞吐下零丢包,IOPS(Input/output Operations Per Second,每秒进行读写操作的次数)提升 20-30%。

在集中式存储场景,除了对交换机水线的智能动态调整外,还实现了即插即用的存储网络:相比传统以太网中逐节点、逐零手工配置方式,可以做到业务单点配置、全网同步,实现存储设备的即插即用。

网络侧与存储侧的故障联动图


实现了网络侧与存储侧的故障联动,交换机毫秒级检测并通告故障,协同业务侧完成亚秒级的网络平面切换,实现网络中单点故障存储业务无感知。

好了,云超融合数据中心就介绍到这里了。懂技术就是有福气!关注我学习更多网络知识。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,921评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,635评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,393评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,836评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,833评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,685评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,043评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,694评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,671评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,670评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,779评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,424评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,027评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,984评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,214评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,108评论 2 351
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,517评论 2 343

推荐阅读更多精彩内容