Mac下利用vmware fushion安装centos服务器,然后搭建Hbase集群环境。
安装前的准备
搭建好Hadoop集群以及Zookeeper集群
Hadoop集群的搭建参考:Hadoop三节点集群搭建
Zookeeper集群的搭建参考:Zookeeper三节点集群搭建安装中用到的软件包
hbase-1.2.0-cdh5.14.2.tar.gz
安装过程
- 上传安装包到服务器并解压
scp hbase-1.2.0-cdh5.14.2.tar.gz hadoop@node01:/kkb/soft
tar -zxf /kkb/soft/hbase-1.2.0-cdh5.14.2.tar.gz -C /kkb/install/
- 修改hbase配置文件
- 修改环境变量
sudo vim /etc/profile
# 修改为
export HBASE_HOME=/kkb/install/hbase-1.2.0-cdh5.14.2
# PATH增加:
$HBASE_HOME/bin
- 修改hbase-env.sh
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim hbase-env.sh
# 进行如下配置
export JAVA_HOME=/kkb/install/jdk1.8.0_141
export HBASE_MANAGES_ZK=false
- 修改hbase-site.xml
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim hbase-site.xml
# 修改为:
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://node01:8020/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<!-- 0.98后的新变动,之前版本没有.port,默认端口为60000 -->
<property>
<name>hbase.master.port</name>
<value>16000</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>node01,node02,node03</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>2181</value>
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/kkb/install/zookeeper-3.4.5-cdh5.14.2/zkdatas</value>
</property>
<property>
<name>zookeeper.znode.parent</name>
<value>/hbase</value>
</property>
</configuration>
- 修改reginservers
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim regionservers
# 删除localhost
# 修改为:
node01
node02
node03
- 创建back-masters配置文件,实现HMaster的高可用
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim backup-masters
# 修改为:
node02
- 远程复制hbase到集群各个机器
- 分发hadoop安装文件到node02,node03
cd /kkb/install
scp -r hbase-1.2.0-cdh5.14.2/ node02:$PWD
scp -r hbase-1.2.0-cdh5.14.2/ node03:$PWD
- 分发全局环境配置文件/etc/profile到node02,node03
sudo scp /etc/profile node02:/etc/profile
sudo scp /etc/profile node03:/etc/profile
- 使集群中所有机器的环境变量生效
ssh node02
source /etc/profile
hadoop version
exit
ssh node03
source /etc/profile
hadoop version
exit
- 三台机器创建软连接
因为hbase需要读取hadoop的core-site.xml以及hdfs-site.xml当中的配置文件信息,所以三台机器都要执行以下命令创建软连接:
ln -s /kkb/install/hadoop-2.6.0-cdh5.14.2/etc/hadoop/core-site.xml /kkb/install/hbase-1.2.0-cdh5.14.2/conf/core-site.xml
ln -s /kkb/install/hadoop-2.6.0-cdh5.14.2/etc/hadoop/hdfs-site.xml /kkb/install/hbase-1.2.0-cdh5.14.2/conf/hdfs-site.xml
Hbase的启动
注意:启动hbase前需要启动 hadoop集群和zookeeper集群
在node01上执行以下命令进行启动:
cd /kkb/install/hbase-1.2.0-cdh5.14.2
bin/start-hbase.sh