hadoop完全分布式的安装
1.环境准备
- jdk_1.7.0_79
- hadoop-2.5.1
- master和slave两个节点并配置好hosts文件和hostname
2.安装jdk
3.配置环境变量
在(.bash_profile)中配置java和hadoop的环境变量
4.配置ssh（重点）
master：
（1）ssh-keygen -t rsa -P ''
（2）scp .ssh/id_rsa.pub root@192.168.1.1:~ （ip地址为slave节点的ip）
slave：
（1）cat id_rsa.pub >> .ssh/authorized_keys
5.修改core-site.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://masteviVIr:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/opt/hadoop-2.5.1</value>
</property>
</configuration>
6.修改hdfs-site
<configuration>
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>slave:50090</value>
</property>
<property>
<name>dfs.namenode.secondary.https-address</name>
<value>slave:50091</value>
</property>
</configuration>
7.配置masters和slaves
在 (/opt/software/hadoop-2.5.1/etc/hadoop) 目录下创建masters和slaves文件，并在masters中写入master，在slaves文件中写入master，slave（或者只写slave，这个是配置datanode的个数）
masters：
slaves：
8.将master 节点中的hadoop文件拷贝到slave节点中
9.格式化
hdfs namenode -format
注意：
1.在启动hdfs之前需要先格式化，如果启动失败需要再次格式化
2.格式化之前需要删除生成的配置文件（在core-site.xml配置的那个）
10.启动 start-dfs.sh
11. 测试
http://master:50070（master为master节点的IP地址）
出现如上图所示结果，则配置成功
