大数据之集群分发脚本

一、scp、rsync命令

scp -r linan@hadoop101:/opt/module root@hadoop102:/opt/moduler 
sync-rvl linan@hadoop101:/opt/module root@hadoop102:/opt/module

二、集群分发脚本

#!/bin/bash

#1 获取输入参数个数，如果没有参数，直接退出

pcount=$#           
if ((pcount==0))
then
echo no args;
exit;
fi

#2 获取文件名称
p1=$1
fname=`basename  $p1`
echo fname=$fname

#3 获取上级目录到绝对路径
pdir=`cd -P $(dirname $p1); pwd`
echo pdir=$pdir

#4 获取当前用户名称user=`whoami`

# 5循环
for((host=102; host<104;host++))
do
echo "=============hadoop$host==============";
rsync -rvl $pdir/$fname $user@hadoop$host:$pdir
done

三、ssh免密登录

1、生成ssh公私密钥(.ssh文件夹下执行操作)
1.执行ssh-keygen -t rsa   命令，生成id_rsa、id_rsa.pub两文件 
2.将id_rsa.pub文件内容拷贝至目标主机: ssh-copy-id hadoop103