使用docker搭建hadoop分布式集群

本文档作为简单笔记。详细操作参见:

一、环境准备

1:首先要有一个Centos7操作系统,可以在虚拟机中安装。

2:在centos7中安装docker,docker的版本为1.12

二、镜像制作

1、centos-ssh-root镜像

2、centos-ssh-root-jdk镜像

3、centos-ssh-root-jdk-hadoop镜像

三、搭建hadoop分布式集群

1:集群规划

准备搭建一个具有三个节点的集群,一主两从

主节点:hadoop0 ip:192.168.2.10

从节点1:hadoop1 ip:192.168.2.11

从节点2:hadoop2 ip:192.168.2.12

2:启动三个容器,分别作为hadoop0 hadoop1 hadoop2

3:给这三台容器设置固定IP

4:配置hadoop集群

主机名配置

设置ssh免密码登录

在hadoop0上修改hadoop的配置文件

格式化

启动伪分布hadoop

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容