centos离线安装CDH(2.1): 虚拟机环境准备

阿里巴巴淘系技术部招聘大数据研发、数据分析、数据挖掘同学(P6-P8)。
微信: 18520269913  备注: 阿里巴巴淘系技术部-大数据

vmware网络适配器使用桥接模式

网桥模式是我最喜欢的用的一种模式,同时,模拟度也是相当完美。你可以这样理解,它是通过主机网卡,架设了一条桥,直接连入到网络中了。因此,它使得虚拟机能被分配到一个网络中独立的IP,所有网络功能完全和在网络中的真实机器一样。
修改网络适配器需要重启虚拟机。重启之后,通过vmware依次进行centos,右键终端,找到每台机器的ip。

设置sudo免密码

切换到root账户
su -
sudo vim /etc/sudoers
在文件的最后一行加入

hadoop ALL=(ALL) NOPASSWD : ALL

保存退出就可以了,然后su hadoop退出root账号。

修改yum的源

因为我们后面要安装cdh对应的很多软件,如果使用国外源会非常慢,这里我们切换成aliyun的源。
备份系统自带源

sudo mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup

下载阿里云源配置

sudo wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo

执行生效

sudo yum makecache
sudo yum -y update

设置开机进入命令行模式

sudo vim /etc/inittab
把
id:5:initdefault:
改成
id:3:initdefault:

修改时区,从阿里云同步时间

sudo cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
sudo ntpdate ntp1.aliyun.com
# 查看当前时间
date

安装ntp

sudo yum install -y ntp

配置ntp
我们选择阿里云的ntp服务地址,注意把之前配置的server注释掉
sudo vim /etc/ntp.conf

server ntp1.aliyun.com
server ntp2.aliyun.com
server ntp3.aliyun.com
# 启动ntp
sudo service ntpd start
# 配置开机启动ntp
sudo chkconfig ntpd on
# 同步时间从ntp
sudo ntpdate -u ntp1.aliyun.com
# 同步到硬件时间
sudo hwclock --systohc

关闭防火墙

sudo /etc/init.d/iptables status
sudo /etc/init.d/iptables stop
# 开机不启动防火墙
sudo chkconfig iptables off

修改SELINUX

sudo vim /etc/selinux/config

SELINUX=enforcing
修改为
SELINUX=permissive

安装python2.7

sudo yum install -y centos-release-scl
sudo yum install -y scl-utils
sudo yum install -y python27
-- 验证一下
source /opt/rh/python27/enable
python --version

配置mac与centos的免密登录

如果你是windown,方法也类似
执行ssh-keygen -t rsa
把mac中.ssh/id_rsa.pub的内容copy到虚拟机的.ssh的authorized_keys下,同时设置权限

vim .ssh/authorized_keys
chmod 600 .ssh/authorized_keys

修改固定ip

sudo vim /etc/sysconfig/network-scripts/ifcfg-eth0

下面这一段是centos网络环境的基本信息,包括mac、uuid等,请保持不变。需要注释掉BOOTPROTO="dhcp"这一行

DEVICE="eth0"
#BOOTPROTO="dhcp"
HWADDR="00:0C:29:E1:21:49"
IPV6INIT="yes"
NM_CONTROLLED="yes"
ONBOOT="yes"
TYPE="Ethernet"
UUID="0faf8a14-8503-4d32-bfaf-73dc902cfcde"

在文件的最下面增加,请根据实际情况填写。IPADDR每天机器都不一样。

NM_CONTROLLED=yes
BOOTPROTO=static
IPADDR=192.168.1.130
NETMASK=255.255.255.0
GATEWAY=192.168.1.1
DNS1=192.168.1.1

然后执行sudo service network restart,执行之后终端连接可能会断开,请连接新的ip。因为后面还有不少修改,可以后续统一重启

修改主机名

sudo vim /etc/sysconfig/network

修改hostname,保存,然后重启机器

NETWORKING=yes
HOSTNAME=hadoop130.i.md31.cn

sudo reboot 因为后面还有不少修改,可以后续统一重启

配置hosts

sudo vim /etc/hosts
配置如下:

192.168.1.130 hadoop130.i.md31.cn
192.168.1.131 hadoop131.i.md31.cn
192.168.1.132 hadoop132.i.md31.cn
192.168.1.133 hadoop133.i.md31.cn

需要重启虚拟机sudo reboot,然后使用下面命令验证

# 查看hostname等信息
uname -a
# 查看ip等信息
ifconfig
# 通过hostname反向查找ip,这一步一定要能正常看到对应的ip。
host -v -t A hadoop130.i.md31.cn

配置虚拟机各个机器的免密登录

从实际操作的情况来看,这个步骤并不需要

重启下虚拟机

sudo reboot

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,390评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,821评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,632评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,170评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,033评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,098评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,511评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,204评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,479评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,572评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,341评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,213评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,576评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,893评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,171评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,486评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,676评论 2 335