Hadoop Install (1) ——Hadoop 伪分布式安装

参考: https://hadoop.apache.org/docs/r2.9.2/hadoop-project-dist/hadoop-common/SingleCluster.html

需要修改/etc/hostname、/etc/hosts、安装JDK、下载Hadoop tar包

  1. 配置hadoop-env.sh
export JAVA_HOME=/opt/soft/jdk1.8.0_191
  1. 配置core-site.xml
    编辑etc/hadoop/core-site.xml
<configuration>
<property>
    <!-- The name of the default file system. A URI whose scheme and authority determine the FileSystem implementation. default value: file:/// -->
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
<property>
    <!-- A base for other temporary directories.default value: /tmp/hadoop-${user.name} -->
        <name>hadoop.tmp.dir</name>
        <value>/opt/soft/hadoop-2.9.1/hadoop-tmp</value>
    </property>
</configuration>

  1. 配置hdfs-site.xml
    编辑etc/hadoop/hdfs-site.xml
<configuration>
    <property>
    <!-- Default block replication. The actual number of replications can be specified when the file is created. The default is used if replication is not specified in create time. Default value: 3 -->
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

4.配置免密登陆本机
5.格式化namenode

hadoop namenode -format
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 一、系统参数配置优化 1、系统内核参数优化配置 修改文件/etc/sysctl.conf,添加如下配置,然后执行s...
    张伟科阅读 9,191评论 0 14
  • 版权声明:本文为博主原创文章,未经博主允许不得转载。 目录-[-]1 先决条件2 实验环境搭建 21 准备工...
    三三At你阅读 4,316评论 0 3
  • 伪分布模式 设备: 一台 linux 特点: 在单机上模拟分布式环境,拥有Hadoop所有功能 配置文件:hado...
    Ada54阅读 5,940评论 0 2
  • 太阳渐渐的沉了下去,在山峰的怀抱中入了甜甜的梦,世界变的静悄悄。直到,一个朦胧的光圈拨开了身上的轻纱,一时间一呼百...
    捱不明的更漏阅读 2,325评论 0 1
  • 自由写作第二个月第4篇。 昨晚跟一位因想改变来寻求我的建议的人在微信上聊了几句。她的情况说起来也很简单,就是有一份...
    守望智慧阅读 4,357评论 5 11

友情链接更多精彩内容