读数据保护:工作负载的可恢复性09磁盘备份方案

读数据保护:工作负载的可恢复性09磁盘备份方案.png

1. 用磁盘给磁带机做缓存

1.1. 对于云端来说,并没有D2D2T(Disk-to-Disk-to-Tape,从磁盘到磁盘再到磁带)之类的说法

1.2. 大多数备份都是增量备份

1.3. 每秒钟只会产生几个到几十个MB的数据,然而磁带机所要求的速度则是每秒钟几百个MB,它们至少要达到这样的速度才能顺畅地运行

  • 1.3.1. 如果磁带机的理想速度是每秒700MB,而你的备份流程每秒只能产生10MB的数据,那么磁带机与备份流程都会出状况

1.4. 没人关心你能不能备份,他们只看你能不能从中恢复数据

2. 备份系统中使用磁盘

2.1. 把一些磁盘放在磁带柜的前端,让它充当磁带机的缓存

  • 2.1.1. 根据每晚所能产生的最大备份量来购买足够多的磁盘

  • 2.1.2. 由于这些磁盘只是用来给磁带机做缓存的,因此最坏的情况只不过就是由于磁盘受损而丢失昨天晚上所做的那个备份

2.2. SATA、SAS与SSD的性能与可靠程度各不相同,SAS比SATA好,SSD比SAS好

2.3. 一定要考虑到是否需要做即时恢复,也就是说,你需不需要直接把备份挂载成虚拟机

2.4. 如果要做即时恢复,那么或许可以考虑多花一些钱,购买SAS或SSD来给磁带机做缓存

2.5. 标准的磁盘阵列应该比目标去重设备便宜

  • 2.5.1. 不需要购买目标去重系统的

  • 2.5.2. 不会产生与使用目标去重系统有关的一些开销

  • 2.5.3. 只是用磁盘暂时存放一些数据,让它们能够高速地发给磁带机而已

  • 2.5.4. 每个备份流程都可以按照各自的速度把数据写入磁盘阵列,而不会影响到其他的备份流程

2.6. 把所有的备份都做完之后,将它们复制到两套磁带里面,一套保留在主站的磁带柜中,另一套转移到别处

2.7. 最后一步就是要在新做的备份即将进入磁盘之前,让磁盘中最旧的那个备份过期(也就是将其删掉)

  • 2.7.1. 尽量让每个备份都在磁盘里待得久一些,因为其中的某个备份或许会在恢复数据的过程中用到

  • 2.7.2. 良好的备份系统应该能够自动执行这个让备份过期的处理,它们会在你正要制作今天晚上的这个备份时,把最老的那个备份删掉

2.8. 用磁盘做备份缓冲(disk staging),能够解决备份数据的传入速度与磁带机的速度不一致的问题

  • 2.8.1. 恢复数据并没有太大帮助,除非你的磁盘能够容纳一个完全备份以及根据这个完全备份所制作的一系列增量备份

  • 2.8.2. 磁盘缓存的主要优势并不在于它能帮我们更顺利地恢复数据,而在于它能够让我们用较低的成本,轻松地实现出一种能够将数据顺利写入磁带的机制

  • 2.8.3. 让我们能够沿用目前的磁带柜系统与备份软件,我们只需要购置几块价格相对低廉的磁盘,就可以让磁带柜与备份软件对接得更加顺畅

3. D2D2T

3.1. D2D2T(Disk-to-Disk-to-Tape,从(有待保护的系统的)磁盘到(备份系统的)磁盘再到(磁带柜里面的)磁带)

3.2. 所购买的磁盘不是用来暂时保存一个晚上的备份量,而是用来正式保留备份数据,这意味着你可以使用去重技术,让磁盘所要保存的数据少一些,这样就能够少买几块磁盘

3.3. 所购置的磁盘至少要能够保存一个备份周期里的数据量(也就是一个完全备份与一系列基于这个完全备份所制作的增量备份)

3.4. 应该把所有的备份先发送到保存去重数据的磁盘,然后再从磁盘复制到磁带

  • 3.4.1. 保存去重数据的磁盘,就是你在执行恢复时首选的数据来源

  • 3.4.2. 只有在无法通过该磁盘恢复数据时,才考虑从磁带里面恢复

  • 3.4.3. 磁带只用来保存离站的备份副本,这些副本在磁带上存留的时间可能比在磁盘上更长

  • 3.4.4. 只会制作一份磁带形式的副本,并将其存放到别处

  • 3.4.5. 副本只用来应急,大家都不想遇到真正需要使用它的情况,但万一遇到了,它还是管用的

3.5. 跟这个方案相搭配的去重技术,通常是目标去重技术

  • 3.5.1. 在只能购买一个去重设备的前提下,还是使用目标去重比较方便

3.6. 使用源端去重时必须注意一个问题,就是某些系统可能会把已经去重的数据直接复制到磁带里面

3.7. 将去重数据存放在磁带上,意味着恢复一份文件可能要用到好几盘磁带,因为必须把分散在那些磁带里的数据结合起来才能得到完整的文件

  • 3.7.1. 磁带比较便宜,我们不值得为了节省磁带而把经过去重处理的数据保存到上面,那样会给恢复工作造成很大困难,你必须先把这些数据所缺失的内容填补回来,然后才能恢复

  • 3.7.2. 需要用磁带做恢复,通常意味着已经无法用其他方式来做恢复了,在这种情况下如果还要先把缺失的数据填补回来,那会更加忙乱

4. D2D2D

4.1. 可以彻底不用磁带,而是完全采用磁盘来构建备份与恢复系统,这叫作D2D2D(Disk-to-Disk-to-Disk,从(有待保护的系统的)磁盘到(备份系统的)磁盘再到(位于别处的另一套)磁盘)

4.2. 需要采用某种去重技术给备份去重,并把它保存到磁盘系统上,然后,你需要将磁盘系统里保存的这些已经去重的备份复制到另一个磁盘系统,这次复制所涉及的去重技术,与刚开始备份时所采用的去重技术,应该是同一个厂家提供的

4.3. 如果使用目标去重系统,那么这个复制备份数据的过程可以由去重设备来做,也可以由备份软件来做

4.4. 不需要在备份流程里专门对这个复制的过程做配置或管理,你只需要安排两个设备,并让其中一个把备份复制到另一个上面

4.5. 不需要借助某个服务提供商,就可以制作出在场备份与离场备份

4.6. 让设备来管理这个复制备份数据的过程,其坏处在于:备份软件并不知道这个备份还有一个副本保存在别处

  • 4.6.1. 让设备来管理复制过程,还意味着这个过程对备份软件来说是“不可见的”,

  • 4.6.2. 将去重之后的备份照原样复制过去,假如它不清楚这一点,那么有可能会先把备份里缺失的内容填补回来,然后再复制

  • 4.6.3. 源端去重,那就无须担心这问题了,这也是源端去重的另一项优势

    • 4.6.3.1. 备份软件清楚这些数据是已经去重的备份数据,只需要直接复制到别处就好,不需要先将其中缺失的内容填补回来

4.7. 让备份软件来管理这个复制备份数据的过程,还有一个好处就是可以针对不同的设备指定不同的保留期

5. D2C

5.1. D2C(Direct-to-Cloud,直接到云),这种方案需要配合源端去重技术

5.2. 所有的备份都放在备份客户端去重,然后把其中互不重复的chunk直接发送到云端

5.3. 使用源端去重意味着你可以在任何地方做备份,而不像采用目标去重,还必须在那个地方安设一个硬件才行

5.4. 最大缺陷在于,如何处理首次备份的数据以及那些数据量比较大的恢复工作

5.5. 如何处理第一次备份,这种备份也称为initial seed(初始种子)

  • 5.5.1. 对于源端去重来说,增量备份所产生的数据量通常还不到有待备份的那个数据集的百分之一,因此,向云端传输这种日常的增量备份对带宽并没有多高的要求

  • 5.5.2. 第一次备份必须把所有的东西都备份下来,因此按照你们目前的网速来说,可能要花好长时间才能把数据传过去

  • 5.5.3. 许多D2C的备份产品与服务,都支持通过物流来传输首次备份的数据

    • 5.5.3.1. 可以把这次备份的数据放在一个便携设备里,寄给云平台的提供商

5.6. 云端做DR(灾难恢复)

6. D2D2C

6.1. 一种只需要使用磁盘的方案,叫作D2D2C(Disk-to-Disk-to-Cloud,从磁盘到磁盘再到云),它是先把数据备份到本组织自己的磁盘系统里面,然后再将其中的某些或全部备份保存到云端

6.2. D2D2C跟D2C之间的区别在于,云端仅是用来存放备份副本或旧备份的次要场所,放在本组织里面的这个备份,才是首要的备份

6.3. D2D2C方案通常会由那些传统的备份厂商提供,他们主要是把经过去重的备份数据复制到客户自己的磁盘系统里面,云端仅是保存应急副本的地方

  • 6.3.1. 把本来应该放在别处的备份副本放在了云端而已

6.4. 通常会把备份复制到对象存储系统(例如S3),而且通常会把其中已经删掉的重复内容填补回来

6.5. 如果你想把备份数据放在本组织自己的系统里,以便将来能够快速恢复数据,而把云端只当成能够保存另一套备份且开销比较低的地方(也就是说,你并不想从云端做灾难恢复),那么将备份复制到对象存储系统中就是比较合适的做法

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,539评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,911评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,337评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,723评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,795评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,762评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,742评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,508评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,954评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,247评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,404评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,104评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,736评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,352评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,557评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,371评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,292评论 2 352

推荐阅读更多精彩内容