240 发简信
IP属地:北京
  • 我出现过陷入死循环的问题,不知该怎么调参,个别时候bulkLoad能成功,但只要不成功就陷入死循环,所以请教一下怎么调参。

    HBase bulkLoad时间都花在哪?

    近期工作中使用hbase bulkload向hbase导入2TB数据(10000个hfiles),我们发现将hfiles加载到hbase 表的过程用了将近一个小时。这和我对b...

  • 我在测试环境是没问题的,在生产环境我也遇到类似的问题 ,但是我没看到报错,spark ui界面全跑完了,load到hbase出现问题,一直运行,不报错,连续两天每天运行13个小时,就是不停,也不报错,因为晚上12点之前必须停掉,否则可能耽误天任务,所以没能看到报错日志,请问你这是怎么解决的。

    client.RpcRetryingCaller: Call exception

    首先说下场景这个问题出现在Spark将Mysql导入Hbase中时遇到的 Spark 通过 BulkLoad 方式写 hbaseSpark将数据写到 hdfs 后程序很久一直...

  • 120
    发布人:夏小权 发布主题:HBase 发布时间:2018-12-17

    HBase入门基础 发布人:夏小权 一、HBase简介 1、HBase概述: 1)HBase 是 BigTable 的开源(源码使用 Java 编写)版本。是 Apache ...

  • 120
    发布人:夏小权 发布时间:2018-12-17

    HBase入门基础 发布人:夏小权 一、HBase简介 1、HBase概述: 1)HBase 是 BigTable 的开源(源码使用 Java 编写)版本。是 Apache ...