服务器间文件传输

1.scp(secure copy)安全拷贝

(1)基本语法

scp -r 源路径 目的地路径

scp   -r      $pdir/$fname       $user@$host:$pdir/$fname
命令  递归   要拷贝的文件路径/名称  目的地用户@主机:目的地路径/名称

scp   -r    $user@$host:$pdir/$fname  $user@$host:$pdir/$fname
命令  递归   源地用户@主机:源路径/名称  目的地用户@主机:目的地路径/名称

指定端口号用-P 端口号

(2)案例实操

以下s1、s2、s3做了 /etc/hosts 配置,也可以切换为主机 ip

  • 在 s1 服务上,将 s1中 /opt/module/jdk1.8.0_212 目录拷贝到 s2 /opt/module 目录下。

    $ scp -r /opt/module/jdk1.8.0_212 zy@s2:/opt/module
    
  • 在 s2 服务上,将 s1 中 /opt/module/jdk1.8.0_212 目录拷贝到 s2 上。

    $ scp -r zy@s1:/opt/module/jdk1.8.0_212 /opt/module/
    
  • 在 s2 服务上,将 s1 中 /opt/module目录下所有目录拷贝到 s3 上。

    $ scp -r zy@s1:/opt/module/* zy@s3:/opt/module
    

2.rsync远程同步工具

rsync主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点。

rsync和scp区别:用rsync做文件的复制要比scp的速度快,rsync只对差异文件做更新。scp是把所有文件都复制过去。

(1)基本语法

rsync  -av       $pdir/$fname      $user@$host:$pdir/$fname
命令  选项参数  要拷贝的文件路径/名称  目的地用户@主机:目的地路径/名称
 选项参数说明
选项 功能
-a 归档拷贝
-v 显示复制过程

(2)案例实操

  • 在 s1 的 /opt/module/hadoop-3.1.3 下新增文件

  • 同步 s1 中的 /opt/module/hadoop-3.1.3 到 s2

    $ rsync -av jdk1.8.0_212/ zy@s2:/opt/module/jdk1.8.0_212/
    

3.脚本分发

期望脚本在任何路径都能使用(脚本放在声明了全局环境变量的路径),以下路径中都能全局使用

$ echo $PATH
/usr/local/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/home/zy/.local/bin:/home/zy/bin

脚本实现

在 /home/zy/bin 目录下创建 xsync 文件

#!/bin/bash

#1. 判断参数个数
if [ $# -lt 1 ]
then
    echo Not Enough Arguement!
    exit;
fi

#2. 遍历集群所有机器
for host in s1 s2 s3
do
    echo ====================  $host  ====================
    #3. 遍历所有目录,挨个发送

    for file in $@
    do
        #4. 判断文件是否存在
        if [ -e $file ]
            then
                #5. 获取父目录, -P 是软链接进入实际目录
                pdir=$(cd -P $(dirname $file); pwd)

                #6. 获取当前文件的名称
                fname=$(basename $file)
                # -p 防止文件已存在报错,加上不报错
                ssh $host "mkdir -p $pdir"
                rsync -av $pdir/$fname $host:$pdir
            else
                echo $file does not exists!
        fi
    done
done

执行

$ chmod +x xsync
$ xsync /home/zy/bin # 脚本分发到所有服务器
$ sudo ./bin/xsync /etc/profile.d/my_env.sh # root权限文件分发用sudo,路径要写完

4.ssh无密登录

配置了次项过后,ssh在进行数据传输的时候就不用每次输入密码

各个服务器上执行,在~/.ssh 目录生成公钥和私钥

$ ssh-keygen -t rsa

将公钥拷贝到要免密登录的目标机器上

$ ssh-copy-id server1 # 拷贝当前服务器公钥到 server1 服务器上

.ssh 文件夹下文件

文件名 描述
known_hosts 记录ssh访问过计算机的公钥(public key)
id_rsa 生成的私钥
id_rsa.pub 生成的公钥
authorized_keys 存放授权过的无密登录服务器公钥
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容