人人都是架构师+分布式系统架构落地与瓶颈突破,你值得拥有

一个优秀的架构师,抽象思维能力是必不可少的,架构师要善于“店丁解牛”,将实物概念化并归类,比如一个大型网站,你能够迅速根据业务功能的不同,将业务垂直化;

而扎实的技术功底又是架构师能力版图中所占比例最大的一块,因为抽象思维能力是虚的,技术能力是实的,只有做到虚实结合 ,才能够达到“手中无剑,心中有剑”的境界:技术前瞻性是需要架构师凭借自身经验和觉预估当前架构的缺陷会为将来埋下哪些隐患、哪些技术问题是需要在网站发展到一定阶段就必须重构的、哪些技术在未来是趋势,需要提前进行了解和学习的领域知识既要求了架构师的知识广度,又要求了架构师的知识深度,因为架构师的技术能力不能够仅局限在自己所擅长的那一亩三分地;

沟通交流能力其实非常重要,因为大多数情况下,我们都是在与人而非计算机打交道,比如,我们构建的系统先是给人使用的,其次才是让计算机理解。

除此之外,业务的沟通探讨、技术方案的探讨等诸多事项都是人与人面对面的直接沟通交流,如果你不善于沟通,那么如何能够让别人明确你的用意 又如何顺利开展工作呢?

架构师的能力版图

本书主要有五部分组成:

只需要转发关注小编,私信小编“学习”就可以获得!

分布式系统的架构演变过程

在移动互联网的浪潮中,你我正生逢其时地 受着当下,如果你愿意做 只站在风口上 待起飞的猪,那么请认真地问问自己,是否已经准备好了?互联网究是什么?简而言之,互联网诠释的是 种精神,融入了高度开放、分 ,以及自由的精神。如果你想融入这个圈子,那么请务必先舍弃掉与互联网精神背道而驰的陈旧观念和思维,否则你自始至终都只会被孤立在局外。

互联网悄然改变了世界,改变了人们对事务的认知,缩短了人与人之间的距离无论你是否愿意承认,互联网已经完全影响并融入我们的生活中。我们的长辈们,也从早期对新鲜事物的排斥,变成现在的欣然接受,这就是互联网与生俱来的魅力和魔力。

笔者的母亲从来就不是 个喜欢追赶潮流的人,但是她早已智能设备从不离身,每天早上起床的第一 件事情就是拿起智能手机,刷刷朋友圈、 看看时事政治、做回“吃瓜群众”,八卦下娱乐新闻,甚至衣食住行也几乎是通过互联网这个载体键搞定的,如图所示。既然互联网能使我们的生活质量更好,那就请张开双臂紧紧拥抱它。

拥有互联网的生活

大流量限流/消峰案例

天猫、淘宝这种级别的大型互联网电商网站,主要的技术挑战来自于庞大的用户规模所带来的大流量和高并发,在“双 11 ”、“双 12 ”等大促场景下尤为明显。

如果不对流量进行合理管制,肆意放任大流量冲击系统,那么将导致 系列的问题出现,比如一些可用的连接资源被耗尽、分布式缓存的容量被撑爆、数据库吞吐量降低,最终必然会导致系统产生雪崩效应。当然,应对大流量和高并发也没有大家想象得那么复杂和神秘。

一般来说,大型互联网站通常采用的做法是通过扩容、动静分离、缓存、服务降级及限流五种常规手段来保护系统的稳定运行。

不同的企业可能会采用不同的解决方案来应对大流量和高并发,因为不同业务之间存在的差异性决定了不会诞生通用的解决方案,所谓条条大路通罗马,只要能够换取同质性的结果,过程如何就显得不是特别重要,这就好比如果能够提前知道罗马的具体位置,那么处处都是路,怎么走都行。

本章的重点是流量管制,只要我们能够采用合理且有效的方式管制住用户流量 让其有秩序地对系统进行访问,那么无论是在平时还是在大促的时候,系统都能够稳定运行。需要明确的是,流量管制的目的是保护系统,让系统的负载处于 个比较均衡的水位,而不是刻意为了限流而限流,否则将会严重影响用户体验,得不偿失。

分布式配置管理服务案例

相信大家对配置信息都不会感到陌生,在实际的开发过程中,无论是访问数据库、分布式缓存系统、消息队列,还是通过 Dubbo 框架实现 RPC 调用,都需要提前配置好目标 URL 、账号/密码等信息,因此这类信息也被称为配置信息。在大部分情况下,我们都会选择将相关配置信息配置在配置文件中,当系统启动时,会从指定的目录下进行加载,通过获取配置文件中的配置信息项来完成环境的初始化工作。

除此之外,我们在使用电脑进行办公、娱乐时,也会高频率地与配置信息打交道,比如,通过操作系统的控制面板来设置显示器的分辨率、鼠标的双击速度 ,以及区域和语言设置等,这些都属于配置信息,所以如果你告诉我你从未接触过配置信息,那么我一定会摇摇头对你说这不可能。

大促场景下热点数据的读/写优化案例

在秒杀、限时抢购这种大促场景下,由于峰值流量较大,大量的并发读/写操作一定会导致后端的存储系统产生性能瓶颈。

前面已经讲解过,提升单机处理能力最有效的办法就是采用集群技术对服务器进行扩容,只要系统能够具备良好的伸缩性,那么从理论上来说,其容量便可以是无限的。

在此需要注意 ,大促场景下因热点数据导致的单点瓶颈已经不再是简单地通过横向扩容就能够顺利解决的,尽管对于读操作我们可以将热点数据缓存在分布式缓存中以达到提升系统 QPS 的目的,但是缓存系统的单点容量还是存在上限的 ,因此应对大促场景下的峰值流量仍显得杯水车薪。

除此之外,由于热点数据的写操作无法直接在缓存中完成,那么这必然会引起大量的线程相互竞争 nnoDB 的行锁。并发越大时,等待的线程就越多,这会严重影响数据库的 TPS ,导致 RT 线性上升,最终可能引发系统出现雪崩。

数据库分库分表案例

大型网站几乎时时刻刻都在接受着高并发和海量数据的洗礼,随着用户规模的线性上升,单库的性能瓶颈会逐渐暴露出来,由于数据库的检索效率越来越慢,导致生产环境中产生较多的慢速 SQL。

对于非结构化的数据,可以将其存储在 NoSQL数据库中来提升性能,但是重要的业务数据,仍然要落盘在关系型数据库(如 MySQL数据库)中。

那么如何提升关系型数据库的并行处理能力和检索效率就成为了架构师需要思考和解决的棘手问题,并且单库如果岩机,业务系统也就随之瘫痪了。

因此,在互联网场景下,架构师务必要确保后端存储系统具备高可用性和高性能,为了解决这些问题,目前互联网场景下常见的做法便是对数据库实施分库分表,即Sharding 改造。

只需要转发关注小编,私信小编“学习”就可以获得!

大家如果想要获取这本《人人都是架构师+分布式系统架构落地与瓶颈突破》的话,

只需要转发关注小编,私信小编“学习”就可以获得!

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,826评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,968评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,234评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,562评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,611评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,482评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,271评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,166评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,608评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,814评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,926评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,644评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,249评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,866评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,991评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,063评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,871评论 2 354

推荐阅读更多精彩内容