服务器与系统架构的一点理解

掐指一算,距离上次写东西已经是几个月前了,并不是人懒,而是四月份入职了新公司,也算是互联网界有头有脸的企业了。这段时间一直在熟悉业务和技术架构,时间非常紧张,今天刚好想起来,整理了一下思路,介绍一下当前公司的服务器和系统基础架构技术(不涉密),也算是这段时间的一个小的技术总结了。

1.服务器架构

服务器架构图
  • 1.服务器分为两种状态:【在线】和【冷备】。顾名思义,前者指正在生产环境投入使用的服务器,后者指作为备机待命的服务器,用以保证在不测之时也不至于让线上服务宕机;

  • 2.使用nginx作为负载均衡服务器,使用Apache业务服务器,每台服务器各自拥有自己的冷备服务器;

  • 3.由于【PDF转换】业务会在执行过程中占用大量资源(内存和CPU),故为其单独开设服务器;

  • 4.静态文件、高频服务及核心业务的服务器各自独立,一方面避免资源挤占造成业务灾难,另一方面便于针对业务特性进行个性化的定制和优化;

  • 5.数据库服务使用独立的服务器集群,便于权限管理、日志记录、问题追踪、个性化定制、定向优化;

  • 6.涉及文件的服务(如安装包下载、静态文件存取等),使用独立的服务器,因为峰期大文件的频繁IO会占用大量的内存,我们可以针对这一特性进行优化;

  • 7.使用ELK(Elasticsearch , Logstash, Kibana)作为日志分析的载体,这个平台功能很强大,目前还不是很熟悉,考虑日后另开研究(挖坑 x 1);

  • 8.使用TCP\长链接的服务使用独立服务器,因为这类服务追求链接的稳定性与可靠性,需要尽量避免其他进程对其产生干扰;

2.系统架构

系统架构图
  • 1.网关Apache均衡策略:相同IP优先访问相同服务器;

  • 2.部门内Nginx均衡策略:根据服务器状态随机分发;

  • 3.nginx负责调用php-fpm和php-cli,apache负责调用php CGI。这种架构实现了动静分离,nginx负责静态内容,apache负责动态内容,算是各取所长了;

  • 4.供内部使用的管理平台,由于来源可控,直接绕过外层网关与服务分发,进行业务交互,同时限制了外部网络无法访问该管理平台,也算是一种变相的权限控制;

  • 5.说出来你可能不信,Redis、MySQL和MongoDB都是作为缓存在使用,并不作为可靠的持久化存储,这是出于对数据库特性的考虑,下面细说;

  • 6.真正做持久化存储的数据库是PostgreSQL,主要是出于兼容性、稳定性、抗灾能力、易于优化等等特性,优点很多,但是上手比MySQL或Mongo较难,考虑另开文章说明(挖坑 x 2);

  • 7.使用Redis作为缓存,具体不多说了,用途都大同小异。当某项数据量过多(多于数十万)时,使用MySQL存储该数据。此类数据大多为脚本跑出来的临时数据,并不是原始数据,用于在某些业务场景下需要满足该业务需求、但是使用Redis存储的话数据量又过多的情况。结合分表处理,用以提升程序在SQL上的效率,同时避免重度依赖作为持久化存储体的PgSQL,缓解PgSQL的压力;

  • 8.使用MongoDB的情形与MySQL差不多,区别是用Mongo存储一些非关系型的数据,如评论等;

  • 9.同时使用这四个存储服务,依照各自的特性各行其职,一方面便于开发,另一方面最大限度的优化程序的效率;

  • 10.PgSQL主库与同步环境的区别在于,主库只能访问备份库和同步环境,用以持久化存储数据信息,同步环境则可以拥有访问高频库(加工库)、备份库(共享、开发、质检、预发布数据库)和集群的权限。这样把主库和同步环境的权限分离出来,避免一些误操作或者灾难对主库保存的数据源造成影响,算是一种容灾策略;

  • 11.PgSQL中的库表做读写分离,Mongo和MySQL做Master-slave;

  • 12.由于最初redis只用了一台服务器,但是实际业务是重度以来redis做缓存的,所以出现过业务高峰、代码不规范或redis使用过于随意等原因,把redis打挂了的情况,所以使用了codis做了redis集群,极大的缓解了对redis的压力。codis作为redis的分布式解决方案非常实用且有效,考虑日后另行介绍(挖坑 x 3);

  • 13.将涉及用户信息存储/身份校验的服务独立出来,通过外部服务的形式整合到业务中,整个业务系统不涉及对用户身份的干预。一方面可以使用各种复杂的安全策略来验证和校验用户信息而不影响原有的业务逻辑,另一方面由于用户信息属于涉密敏感信息,实现了用户信息的对内保密;

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,588评论 6 496
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,456评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,146评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,387评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,481评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,510评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,522评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,296评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,745评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,039评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,202评论 1 343
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,901评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,538评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,165评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,415评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,081评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,085评论 2 352

推荐阅读更多精彩内容

  • 在未翻看《一个人的朝圣》这本书之前,我一直认定,这样一个摆明要清丽脱俗的书名,必定是一段“高大上”的故事才配得起的...
    空思我阅读 199评论 0 2
  • 从文子身上,你可以感受到她的温暖和淡淡的喜悦,尽管她不总是处于喜悦的状态。她心情不好时,会独自一人在家作画。 她的...
    笑笑梅子阅读 375评论 5 1
  • 图片发自简书App 作者:二志成 郑会一 翻译:冯适宜 1.读书的三个阶段 基础定向阅读,通过阅读100本以上与自...
    云和山嘚彼端阅读 177评论 0 0