Centos7安装HBase2.0.5并整合Phoenix

第1章 HBase快速入门

1.1 HBase安装部署

1.1.1 Zookeeper正常部署

首先保证Zookeeper集群的正常部署,并启动之:

[yobhel@hadoop101 zookeeper-3.5.7]$ bin/zkServer.sh start
[yobhel@hadoop102 zookeeper-3.5.7]$ bin/zkServer.sh start
[yobhel@hadoop103 zookeeper-3.5.7]$ bin/zkServer.sh start

1.1.2 Hadoop正常部署

Hadoop集群的正常部署并启动:

[yobhel@hadoop101 hadoop-3.1.3]$ sbin/start-dfs.sh
[yobhel@hadoop102 hadoop-3.1.3]$ sbin/start-yarn.sh

1.1.3 HBase的解压

解压Hbase到指定目录:

[yobhel@hadoop101 software]$tar -zxvf hbase-2.0.5-bin.tar.gz -C /opt/module
[yobhel@hadoop101 software]$ mv /opt/module/hbase-2.0.5 /opt/module/hbase

配置环境变量

[yobhel@hadoop101 ~]$ sudo vim /etc/profile.d/my_env.sh

添加

#HBASE_HOME
export HBASE_HOME=/opt/module/hbase
export PATH=$PATH:$HBASE_HOME/bin

1.1.4 HBase的配置文件

修改HBase对应的配置文件。

1.hbase-env.sh修改内容:

export HBASE_MANAGES_ZK=false

2.hbase-site.xml修改内容:

<configuration>
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://hadoop101:8020/hbase</value>
    </property>
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>hadoop101,hadoop102,hadoop103</value>
    </property>
</configuration>

3.regionservers:

hadoop101
hadoop102
hadoop103

1.1.5 HBase远程发送到其他集群

[yobhel@hadoop101 module]$ xsync hbase/

2.1.6 HBase服务的启动

1.单点启动

[yobhel@hadoop101 hbase]$ bin/hbase-daemon.sh start master
[yobhel@hadoop101 hbase]$ bin/hbase-daemon.sh start regionserver

提示:如果集群之间的节点时间不同步,会导致regionserver无法启动,抛出ClockOutOfSyncException异常。

修复提示:

a、同步时间服务

请参看帮助文档:《尚硅谷大数据技术之Hadoop入门》

b、属性:hbase.master.maxclockskew设置更大的值

<property>
        <name>hbase.master.maxclockskew</name>
        <value>180000</value>
        <description>Time difference of regionserver from master</description>
</property>

2.群启

[yobhel@hadoop101 hbase]$ bin/start-hbase.sh

对应的停止服务:

[yobhel@hadoop101 hbase]$ bin/stop-hbase.sh

1.1.7 查看HBase页面

启动成功后,可以通过“host:port”的方式来访问HBase管理页面,例如:

http://hadoop101:16010/

1.1.8 高可用(可选)

在HBase中HMaster负责监控HRegionServer的生命周期,均衡RegionServer的负载,如果HMaster挂掉了,那么整个HBase集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以HBase支持对HMaster的高可用配置。

1.关闭HBase集群(如果没有开启则跳过此步)

[yobhel@hadoop101 hbase]$ bin/stop-hbase.sh

2.在conf目录下创建backup-masters文件

[yobhel@hadoop101 hbase]$ touch conf/backup-masters

3.在backup-masters文件中配置高可用HMaster节点

[yobhel@hadoop101 hbase]$ echo hadoop102 > conf/backup-masters

4.将整个conf目录scp到其他节点

[yobhel@hadoop101 hbase]$ scp -r conf/ hadoop102:/opt/module/hbase/
[yobhel@hadoop101 hbase]$ scp -r conf/ hadoop103:/opt/module/hbase/

5.打开页面测试查看

http://hadoop101:16010/

第2章 整合Phoenix

2.2 Phoenix快速入门

2.2.1安装

1.官网地址

http://phoenix.apache.org/

2.Phoenix部署

1)上传并解压tar包

[yobhel@hadoop101 software]$ tar -zxvf apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz -C /opt/module/
[yobhel@hadoop101 software]$ cd /opt/module/
[yobhel@hadoop101 module]$ mv apache-phoenix-5.0.0-HBase-2.0-bin phoenix

2)复制server包并拷贝到各个节点的hbase/lib

[yobhel@hadoop101 module]$ cd /opt/module/phoenix/
[yobhel@hadoop101 phoenix]$ cp /opt/module/phoenix/phoenix-5.0.0-HBase-2.0-server.jar /opt/module/hbase/lib/
[yobhel@hadoop101 phoenix]$ xsync /opt/module/hbase/lib/phoenix-5.0.0-HBase-2.0-server.jar

3)配置环境变量

# PHOENIX_HOME
export PHOENIX_HOME=/opt/module/phoenix
export PHOENIX_CLASSPATH=$PHOENIX_HOME
export PATH=$PATH:$PHOENIX_HOME/bin

4)在 Hbase 家目录下的 conf/hbase-site.xml 文件中添加配置,分发配置文件

[yobhel@hadoop101 phoenix]$ vim /opt/module/hbase/conf/hbase-site.xml
[yobhel@hadoop101 phoenix]$ xsync /opt/module/hbase/conf/hbase-site.xml

配置如下

<property>
    <name>phoenix.schema.isNamespaceMappingEnabled</name>
    <value>true</value>
</property>
<property>
    <name>phoenix.schema.mapSystemTablesToNamespace</name>
    <value>true</value>
</property>

5)在 Phoenix 家目录下的 bin/hbase-site.xml 文件中添加配置

[yobhel@hadoop101 phoenix]$ vim bin/hbase-site.xml

配置如下

<property>
    <name>phoenix.schema.isNamespaceMappingEnabled</name>
    <value>true</value>
</property>
<property>
    <name>phoenix.schema.mapSystemTablesToNamespace</name>
    <value>true</value>
</property>

6)重启HBase

[yobhel@hadoop101 ~]$ stop-hbase.sh
[yobhel@hadoop101 ~]$ start-hbase.sh

7)连接Phoenix

[yobhel@hadoop101 phoenix]$ /opt/module/phoenix/bin/sqlline.py hadoop101,hadoop102,hadoop103:2181
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,948评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,371评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,490评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,521评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,627评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,842评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,997评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,741评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,203评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,534评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,673评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,339评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,955评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,770评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,000评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,394评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,562评论 2 349

推荐阅读更多精彩内容