HBase2.0 vs HBase1.x 延时比较

hbase2.0已经正式发布,对比之前1.x版本,2.0在读写链路上做了完善的优化,offheap、netty rpc等,这里做个小测试实验对比1.x和2.0在读写上的延时情况。本测试基于特定测试环境与软件版本得到的结果,仅供参考。

测试介绍

1 测试环境
HBase2.0集群,2副本DataNode,单regionserver,便于线性扩展;
集群的配置 : 8core x 16G 内存; 4 x 250G ssd云盘;
2 情况简介
读写,1KB,数据,分有cache的读(命中近100%),无cache读;
scan:无cache的scan,有cache 的scan ;预先分配60 region;
3 测试数据
 单条读写的延时,99延时,磁盘的util,cpu的利用率,网卡占用率,gc的时间; 对于99延时的话,查看gc的频率,进行调整。大块数据的直接升到年老代等;
 步骤:先是把没有做调优的性能数据丢出来,完成以后,在就99延时做调优,主要关注网络以及gc的信息;
4 测试结果
调优的涉及:offheap,netty server访问,g1 gc 修改。
99延时:offheap,g1 gc 默认开启,默认netty 开启;25MB 带宽峰值,主要做对比!


image

测试小结

 hbase2.0在读写链路上进行了完善的优化,相比1.1、1.4.4 版本,在延时方面有了比较大的成果。本测试基于特定测试环境与软件版本得到的结果,仅供参考。

原文:HBase2.0 vs HBase1.x 延时比较

更多技术交流,可关注微信交流群,微信公众号等:

或参考文章: HBase中文社区官网、交流群
1. 微信群

扫描添加小编微信好友(或搜索微信号: Mr_wanyue 添加),回复: HBase 加群

2. 钉钉群:

扫一扫添加

3. 微信公众号:
扫描关注

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,860评论 18 139
  • 转 # https://www.cnblogs.com/easypass/archive/2010/12/ 08/...
    吕品㗊阅读 9,779评论 0 44
  • 期待已久的第二届儿童礼仪学术研讨会在厦门举行,4月15日上午杨毅老师讲的儿童礼仪课程设计与培训技巧,让我受益颇多。...
    魏华米妈阅读 684评论 2 2
  • 我自认还算热爱阅读。 有记忆的阅读自幼儿园开始。《幼儿智力世界》是儿时的我最喜欢的期刊,彩色的插画里藏着一个个待人...
    Susie910阅读 280评论 2 3
  • 今天,吃东西的时候没什么下饭的视频可看,就点进芒果TV想看看《天天向上》,看完之后感触不少,没让我失望。 ...
    嚯嚯杨活活阅读 320评论 0 0