【原创】五、Hadoop 2.5.2分布式环境部署

一、地址规划


二、

按照之前安装的机器,克隆两台机器,分别修改hostname、网卡和ip,配置NTP时间同步

修改主机名:vi /etc/sysconfig/network

修改ip:vi/etc/sysconfig/network-scripts/ifcfg-eth0

修改网卡:vi /etc/udev/rules.d/70-persistent-net.rules

Reboot重新启动。

三、

三台机器进行无密登陆配置。

Bigdata01===》bigdata01, bigdata02, bigdata03

Bigdata02===》bigdata01, bigdata02, bigdata03

ssh-keygen -t rsa

ssh-copy-id -i bigdata01.xxxx.com

ssh-copy-id -i bigdata02.xxxx.com

ssh-copy-id -i bigdata03.xxxx.com

Core配置

Hdfs配置

slaves配置

Yarn配置

Mapreduce配置

启动

1、bigdata01.xxxx.com进行namenode格式化。

[jit@bigdata01 hadoop-2.5.2]$ bin/hdfs namenode–format

然后启动hdfs

[jit@bigdata01 hadoop-2.5.2]$ sbin/start-dfs.sh

2、bigdata02.xxxx.com启动yarn

[jit@bigdata02 hadoop-2.5.2]$ sbin/start-yarn.sh

3、bigdata03.xxxx.com启动

[jit@bigdata03 app]$ sbin/mr-jobhistory-daemon.sh start historyserver

四、查看是否启动

hdfs创建目录,上传文件,Mapreduce例子运行

查看运行结果

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容