hadoop配置

#  #配置集群:

1. 配置:hadoop-env.sh(修改其中JAVA_HOME)

2. 配置:core-site.xml

<--指定HDFS中NameNode的地址>

<#property>

    <#name>fs.defaultFS

    <#value>hdfs://hadoop101:8020

    主机名

<#/property>

文件存储目录

同上

3. 配置:hafs-site.xml

指定HDFS副本的数量

同上修改name和value值

#  #启动集群

1. 格式化namenode(第一次启动时格式化,以后不用总格式化)

(bin目录中)hdfs namenode -format

2. 启动namenode(sbin目录中)

sbin/hadoop-daemon.sh start namenode

3. 启动dataname

sbin/hadoop-daemon.sh start datanode

格式化时出现的错误,是格式化HDFS获取的主机名根本映射不到一个正确的IP

查看 /etc/sysconfig/network文件中HOSTNAME

与  cat /etc/hosts中ip与主机号是否存在对应

x修改成对应相同就可以,也可以自己设置相同的主机名

4. 查看hdfs系统web端:本机ip:50070

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 一、系统参数配置优化 1、系统内核参数优化配置 修改文件/etc/sysctl.conf,添加如下配置,然后执行s...
    张伟科阅读 3,956评论 0 14
  • 终极算法 关注微信号每天收听我们的消息终极算法为您推送精品阅读 前言 Hadoop 在大数据技术体系中的地位至关...
    Yespon阅读 131,315评论 12 168
  • 作品目录哪有什么各种瘾 “生活中的各种事情带来的味道总是相伴而至,有时这个味道重点,有时那个味道重点,这样...
    笑话咖啡馆阅读 624评论 2 2
  • 杨胖子真实名字叫杨玉林,今年14岁,下面照片是写这篇文章前照的。 看照片,他哪里是胖子?不过在11...
    搏击教练阅读 1,954评论 0 1
  • 刚刚突然冒出一个声音,今天发生的一切好像解释了为什么我不敢跟别人分享?我总是用我不擅长分享,甚至是我太长时间不跟别...
    Hi_张阅读 150评论 0 0

友情链接更多精彩内容