hadoop伪分布式安装步骤

【资源】hadoop文档地址:http://hadoop.apache.org/docs/r1.0.4/cn/quickstart.html

【1】 : host-only模式下设置静态ip
(1)设置本机win下的Vmnet1网络适配器的IPv4
控制面板 --> 网络和共享中心 --> 更改适配器设置 --> 设置IP

1 设置IP.png

此处设置win本地的VMIP

2 host-only.png

此处设置linux虚拟机的网络连接模式为host-only模式

2.png

此处设置linux的静态IP

2016-10-20_151639.png

设置完后执行命令service network restart 重启网卡

4 ping.png

成功后验证:查看本虚拟机IP并ping 本机下vm所设置IPv4的IP值,

【2】 : 修改主机名

1 :修改当前会话的主机名
        hostname  hadoop  -- 设置当前会话主机名为hadoop
2 :修改配置文件中主机名
       vim /etc/sysconfig/network     将HOSTNAME的值设置为你所要更改的主机名hadoop

【3】 : hostname与IP绑定

更改配置

vim /etc/hosts    添加内容    192.168.1.201  hadoop

2016-10-20_155454.png

【4】 :关闭防火墙

1 : 本会话关闭防火墙
      service iptables stop
2 : 防止防火墙重启关闭
     chkconfig iptables off

3 :其他验证
  chkconfig  -- 检查所有配置内容
             iptables           0:off   1:off   2:on    3:on    4:on    5:on    6:off
  
   chkconfig --list | grep iptables   --查看防火墙配置

   chkconfig iptables off  --永久关闭防火墙

【5】 : 设置SSH(SSH免密码登陆)

1 : 生成公钥
         ssh-keygen -t rsa     --  -t表示使用的生成公钥的算法,这里是rsa算法
       生成的公钥文件在 /~/.ssh下
2 :进入存入公钥文件的目录,将公钥的.pub文件复制给authorized_keys(因为一般访问都是去访问这个文件)
执行命令:
cd .ssh/
cp id_rsa.pub authorized_keys
ssh.png
ssh1.png

【6】 :hadoop安装

1 ) 下载hadoop.tar.gz文件并解压,然后将其复制到 /usr/local/下

tar -xzvf hadoop-1.1.2.tar.gz
cp -r  hadoop-1.1.2  /usr/local  
mv hadoop-1.1.2  hadoop   -- 重命名

2) 创建HADOOP_HOME,修改path

vim  /etc/profile

添加内容
   export HADOOP_HOME="/usr/local/hadoop"
   export GIT_HOME="/usr/local/git"
   export JAVA_HOME="/opt/jdk1.7.0_79"
   export PATH=".:$HADOOP_HOME/bin:$JAVA_HOME/bin:$GIT_HOME/bin:$PATH"

source /etc/profile   - 刷新此配置文件

hadoop -version 查看hadoop版本
2016-10-20_204122.png

3) 修改hadoop中的配置文件

分别要修改目录/hadoop/conf的四个文件
**文件一     hadoop-env.sh
**文件二     core-site.xml
**文件三     hdfs-site.xml
**文件四     mapred-site.xml


hadoop-env.sh文件修改内容
      export JAVA_HOME=/usr/local/jdk/

core-site.xml文件修改内容
     <configuration>
         <property>
            <name>fs.default.name</name>
            <value>hdfs://hadoop:9000</value>  --这里是你的主机名 
            <description>change your own hostname</description>
      </property>
      <property>
           <name>hadoop.tmp.dir</name>
           <value>/usr/local/hadoop/tmp</value>
      </property>  
    </configuration>

hdfs-site.xml文件修改内容
    <configuration>
        <property>
            <name>dfs.replication</name>
            <value>1</value>#这里datanode的个数有几个就可以配几个,默认是三,不能超过datanode的数量
        </property>
        <property>
            <name>dfs.permissions</name>
            <value>false</value>
        </property>
    </configuration>

mapred-site.xml文件修改内容
    <configuration>
        <property>
            <name>mapred.job.tracker</name>
            <value>hadoop:9001</value>  --这里是你的主机名   
            <description>change your own hostname</description>
        </property>
    </configuration>

4 ) 格式化hadoop并启动

 hadoop  namenode  -format      -- 格式化

./start-all.sh   -- 启动

jps  -查看java线程

./stop-all.sh  --关闭
格式化并启动hadoop.png

5 ) 去除启动警告

在/etc/profiile下加环境变量
      export HADOOP_HOME_WARN_SUPPRESS="1"
去除警告.png
去除警告启动.png

6 ) linux本虚拟机测试

访问:
      192.168.1.201:50030    或者  hadoop:50030(这里hadoop是主机名,不是localhost)
      192.168.1.201:50070    或者  hadoop:50070
linux上访问.png

6 ) win7主机测试

    注意:可以先将主机与IP绑定

修改 : C:\Windows\System32\drivers\etc下的hosts文件    将主机名与IP绑定
             添加内容   192.168.1.201  hadoop

访问 :
      192.168.1.201:50030    或者  hadoop:50030(这里hadoop是主机名,不是localhost)
      192.168.1.201:50070    或者  hadoop:50070
win下访问.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,456评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,370评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,337评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,583评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,596评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,572评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,936评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,595评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,850评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,601评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,685评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,371评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,951评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,934评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,167评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,636评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,411评论 2 342

推荐阅读更多精彩内容

  • 简介 用简单的话来定义tcpdump,就是:dump the traffic on a network,根据使用者...
    保川阅读 5,941评论 1 13
  • 一、环境及软件说明 1、虚拟机软件: Oracle VM VirtualBox 5.2.0 2、系统镜像: Cen...
    黑子0123阅读 830评论 0 2
  • 接触玛雅历快一年了,今天突然想每天对玛雅13月亮历做个解读,更好的指引生活。目前在网上有很多种解读,学过玛雅的朋友...
    玛雅13月亮历体验记阅读 986评论 1 0
  • 文/羊晓韵 站在青葱枝头之上的姑娘,难免会遇见几个生命中相对特别的人儿,难免会有着些许幼稚的情感,为着那些幼稚的情...
    不二de星期三阅读 458评论 4 8
  • 朝朝暮暮,日出日落,我这是在等谁还是在盼谁,等那个让我心跳加速的他还是盼那个让人无法不思念的他! ...
    雪落梅妍阅读 111评论 0 0