hbase集群同步

由于当前阶段需要对生产集群(cdh5.14,)的hbase数据进行灾备(备份集群cdh6.1),开始调研hbase的集群同步方案。
主要是两种场景:

  • 需要hbase的存量数据。有些业务已经积累了大量数据。
  • 不需要hbase的存量数据。这种主要是一些表的数据很快全量更新的,另外一些表可以新建。

调研

  • 支持cdh5与cdh6集群之间的同步

不会同步的修改

  • 同步之前的数据
  • 绕过了WAL的操作。比如BulkLoad 或者 `write

todo

一个常见的集群同步案例

image.png
  • 方块是集群
  • 有向连接性表示数据同步的方向

参考

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 一、简介 Hbase:全名Hadoop DataBase,是一种开源的,可伸缩的,严格一致性(并非最终一致性)的分...
    菜鸟小玄阅读 2,406评论 0 12
  • 本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据 、HBase数据模型、HBase物理...
    达微阅读 2,748评论 1 13
  • 初次接触HBase的读者,建议先阅读浅析HBase:为高效的可扩展大规模分布式系统而生 HBase的构成 物理上来...
    耀凯考前突击大师阅读 5,279评论 0 12
  • 没有说出口的爱,便不算爱。——威廉姆 莎士比亚。 简书的一大优点是让天涯若比邻成为现实。不论你住在哪里,是在中国的...
    芋璇阅读 271评论 0 2
  • 近几天来,大家讨论最多的莫过于简书此次的升级,这次升级带来最大的变化是有了能量条的设置,也就意味着每天我们点赞的数...
    螳螂不捕婵阅读 523评论 4 17