Hbase安装配置(含分布式ZooKeeper)

环境说明

系统为CentOS 6.0

192.168.255.128  =》 server01

192.168.255.130  =》 server02

192.168.255.131  =》 server03

/etc/hosts文件中有这些IP和域名的映射关系

配置server01在hadoop用户下可以通过密钥无需密码访问server02和server03

1. 安装配置zookeeper

在三台服务器上执行以下同样的操作

a. 下载

wget http://apache.etoak.com//zookeeper/zookeeper-3.3.4/zookeeper-3.3.4.tar.gz -P /usr/local/src

b. 安装

cd /usr/local/src

tar zxvf zookeeper-3.3.4.tar.gz

mv zookeeper-3.3.4 /usr/local/zookeeper

chown -R hadoop:hadoop /usr/local/zookeeper

解压安装,目录的拥有者设置为zookeeper

c. 建立数据目录

mkdir /data/zookeeper

chown -R hadoop:hadoop /data/zookeeper

d. 修改配置文件

创建配置文件(注意:以下操作在hadoop用户中进行)

su - hadoop

ln -s /usr/local/zookeeper zookeeper

cd zookeeper/conf

cp zoo_sample.cfg zoo.cfg

编辑配置文件

vi zoo.cfg

# 修改数据目录dataDir为以下值  

dataDir=/data/zookeeper  


# 添加以下段落  

server.1=192.168.255.128:2887:3887  

server.2=192.168.255.130:2888:3888  

server.3=192.168.255.131:2889:3889 

server.id=host:port:port标识不同的ZooKeeper服务器

需要在每个服务器的数据目录中(这边为/data/zookeeper)创建myid文件,文件的内容为以上对应的server.id中的id

vi /data/zookeeper/myid  

# 值为各个服务器对应的server.id中的id

id

e. 配置环境变量并启动ZooKeeper

vi .bashrc  

export ZOOKEEPER_HOME=/usr/local/zookeeper  

PATH=$PATH:$ZOOKEEPER_HOME/bin  

exit  

su - hadoop 

需要在每一台机器上都启动

zkServer.sh start

f. 验证

zkCli.sh -server 192.168.255.128:2181

[zk: 192.168.255.128:2181(CONNECTED) 0] help

......

显示帮助内容

2. 安装HBase

同样也是三台服务器执行同样的操作

a. 下载

wget http://apache.etoak.com//hbase/hbase-0.90.5/hbase-0.90.5.tar.gz-P /usr/local/src

b. 安装

cd /usr/local/src

tar zxvf hbase-0.90.5.tar.gz

mv hbase-0.90.5 /usr/local/hbase

chown -R hadoop:hadoop /usr/loca/hbase

c. 配置文件

su - hadoop

ln -s /usr/local/hbase hbase

cd hbase/conf

编辑配置文件hbase-site.xml

vi hbase-site.xml

 

   

    hbase.rootdir 

    hdfs://server01:9000/hbase 

    区域服务器使用存储HBase数据库数据的目录 


   

    hbase.cluster.distributed 

    true 

    指定HBase运行的模式:                 false: 单机模式或者为分布式模式                   

                 true: 全分布模式  



   

    hbase.zookeeper.quorum 

    server01,server02,server03 

    ZooKeeper集群服务器的位置 



编辑配置文件regionservers

vi regionservers  

server02  

server03 

设置环境变量hbase-env.sh

vi hbase-evn.sh  

export HBASE_MANAGES_ZK=false 

使用独立的ZooKeeper时需要修改HBASE_MANAGES_ZK值为false,为不使用默认ZooKeeper实例。

d. hadoop和hbase版本匹配问题

使用的版本信息如下:

hadoop-0.20.205.0.tar.gz

hbase-0.90.5.tar.gz

需要将hadoop主目录下的hadoop-core-0.20.205.0.jar和主目录中lib目录下的commons-configuration-1.6.jar复制到HBase主目录的lib目录中,并删除原来的hbase主目录的lib目录下的hadoop-core-0.20-append-r1056497.jar。

否则,会出现两个错误,不能连接zookeeper和找不到common.configuration对应的类

e. 修改hadoop用户环境变量并启动HBase

vi .bashrc  

export HBASE_HOME=/usr/local/hbase  

PAHT=$PATH:$HBASE_HOME/bin 

exit

su - hadoop

以上使(先退出hadoop用户到root,然后登陆到hadoop用户)环境变量生效

需要先启动ZooKeeper(已经启动)和hdfs文件系统

注意:以下两个命令只需要在server01下启动

start-dfs.sh

start-hbase.sh

f. 测试

hbase shell

hbase(main):001:0> status

2 servers, 0 dead, 1.0000 average load

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,651评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,468评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,931评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,218评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,234评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,198评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,084评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,926评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,341评论 1 311
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,563评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,731评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,430评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,036评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,676评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,829评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,743评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,629评论 2 354

推荐阅读更多精彩内容

  • 三分课内,七分课外。得法于课内,得益于课外。高中注重赏析,迁移。创新。每节课,想想,说说,写写
    静听桐语阅读 116评论 0 0
  • 部门是计算平台,貌似实习没过直接转为校招了,不知道这个算内推还是正式校招。 说是半个小时,实际讲了快一个小时,都比...
    5b9fb50f46a2阅读 682评论 0 0
  • 他的周围只有"血"与"泪"—— 人们举着"需要"的旗子 逼他写"血"和"爱", 他只得欲哭的笑了。 他的周围只有"...
    URNOTBob阅读 344评论 0 0
  • 今天聊一本书《时间的女儿》,它在推理小说排行榜长年稳居桂冠,它的作者是推理小说与阿加莎齐名的约瑟芬铁伊。与产量丰富...
    左道Left阅读 456评论 2 4
  • (一) 小念去荷兰的签证办下来了,年前就走。趁着周末,拉着我们几个一起采购物资。东西多到,傍晚吃饭的时候,我们三个...
    绿喵咪阅读 669评论 2 8