Rsync 企业案例

任务需求

整体思路
  服务器上的数据  先打包放到指定的目录  远程推送至备份服务器上
  给文件创建一个校验码  传输后校验值是否正确  是否丢包
  写入定时任务 
  凌晨一点 数据打包推送至备份服务器
  凌晨二点 检验数据 邮箱通知
  

客户端要求:

1.客户端每天凌晨1点在服务器本地打包备份(系统配置文件\日志文件\其他目录\应用配置等文件)
2.客户端备份的数据必须存放至以主机名_ip地址_当前时间命名的目录中
3.客户端最后通过rsync推送本地已经打包好的备份文件至backup服务器
4.客户端服务器本地保留最近7天的数据,避免浪费磁盘空间

服务端要求:

1.服务端部署 rsync,用于接收客户端推送过来的备份数据
2.服务端需要每天校验客户端推送过来的数据是否完整
3.服务端需要每天校验的结果通知给管理员
4.服务端仅保留 6 个月的备份数据,其余的全部删除
注意:所有服务器的备份目录必须都为/backup
1.备份文件:

/var/log/message

2.对文件打包备份

tar zcf /backup/nfs_172.16.1.31_2020-02-21/messages.tar.gz /var/log/ 

3.要求存储格式:主机名+ip+日期

/backup/nfs_172.16.1.31_2020-02-21/messages.tar.gz

1)取主机名

root@nfs ~#: hostname
nfs

2)取ip

root@nfs ~#: ifconfig eth1|awk 'NR==2{print $2}'
172.16.1.31

3)取时间

root@nfs ~#: date +%F
2020-02-21

拼接命令为:

root@nfs ~#: echo "/backup/$(hostname)_$(ifconfig eth1|awk 'NR==2{print $2}')_$(date +%F)"
/backup/nfs_172.16.1.31_2020-02-21

4.添加校验文件

root@nfs nfs_172.16.1.31_2020-02-21#: ls
messages.tar.gz
root@nfs nfs_172.16.1.31_2020-02-21#: md5sum messages.tar.gz >md5.log

5.校验文件

root@nfs nfs_172.16.1.31_2020-02-21#: md5sum -c md5.log 
/backup/nfs_172.16.1.31_2020-02-21/messages.tar.gz: 确定

6.rsync推送至backup服务器

rsync -avz /backup/ rsync@172.16.1.41::backup --password-file=/etc/rsync.password

7.客户端服务器本地保留最近7天的数据,避免浪费磁盘空间

find  /backup/  -mtime +7  |xargs rm -fr

8.定时任务

# 凌晨一点定时备份
00 01 * * * /bin/sh /server/scripts/backup.sh

服务端要求

1.服务端部署 rsync,用于接收客户端推送过来的备份数据
2.服务端需要每天校验客户端推送过来的数据是否完整

md5sum -c /backup/nfs_172.16.1.31_2020-02-21/md5.log

实现命令

root@backup ~#: find /backup/nfs_172.16.1.31_2020-02-21 -type f -name "md5.log"|xargs md5sum -c
/backup/nfs_172.16.1.31_2020-02-21/messages.tar.gz: 确定

3.服务端需要每天校验的结果通知给管理员
安装邮件服务
yum install mailx -y
修改配置文件

set from=xxxxxxxxx@qq.com                      // QQ邮箱
set smtp=smtps://smtp.qq.com:465               // QQ邮箱DNS默认
set smtp-auth-user=xxxxxxxxx@qq.com            // QQ邮箱
set smtp-auth-password=xxxxxxxxxx              // 第三方16位数的授权码
set smtp-auth=login
set ssl-verify=ignore
set nss-config-dir=/etc/pki/nssdb/

要使用邮件服务,需要去qq邮箱更改设置
第一步


图片.png

第二步


图片.png

第三步


图片.png

默认是关闭状态,开启前两个,需要手机验证或者qq动态码,开启后,在生成授权码,复制授权码到centos的配置文件中

1.进行测试:
echo "test"|mail -s "test" xxxxxxx@qq.com &>/dev/null

图片.png

2.测试加密文件然后通知管理员
find /backup/nfs_172.16.1.31_2020-02-21 -name "md5.log" |xargs md5sum -c |mail -s "check_status" xxxxxxx@qq.com
3.服务端仅保留 6 个月的备份数据,其余的全部删除
find /backup/ -mtime +180 -exec rm {} \;
4.写入定时任务

# 凌晨二点检验
00 02 * * * /bin/sh /server/scripts/chack.sh

脚本汇总

客户端脚本

#!/bin/bash
#Author:ajie
#Time:2020-02-21 11:45:15

# 指定环境变量
export PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin"

# 定义变量
NAME=`hostname`
IP=`ifconfig eth1|awk 'NR==2{print $2}'`
DATE=`date +%F`
DIR=/backup
DEST=${NAME}_${IP}_$DATE

# 创建备份目录
mkdir -p $DIR/$DEST/

# 备份数据
tar zcf /$DIR/$DEST/messages.tar.gz /var/log/ &>/dev/null

# 加密文件
md5sum $DIR/$DEST/messages.tar.gz > $DIR/$DEST/md5.log

# 远程传输
rsync -zva $DIR/  rsync@172.16.1.41::backup --password-file=/etc/rsync.password

# 删除七天前的数据
find  /backup/  -mtime +7  |xargs rm -fr

服务端脚本


#!/bin/bash
#Author:ajie
#Time:2020-02-21 16:54:25

# 指定环境变量
export PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin"

# 定义变量
DATE=`date +%F`
DIR=/backup
IP=nfs_172.16.1.31_$DATE

# 校验数据
find $DIR/$IP/ -name "md5.log" |xargs md5sum -c > /$DIR/check.txt

# 发邮件通知管理员
echo `md5sum -c $DIR/$IP/md5.log`|mail -s "check_status" xxxxxxxx@qq.com &>/dev/null


# 删除180天前的内容
find $DIR/ -mtime +180 |xargs rm -fr

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,445评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,889评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,047评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,760评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,745评论 5 367
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,638评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,011评论 3 398
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,669评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,923评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,655评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,740评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,406评论 4 320
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,995评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,961评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,023评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,483评论 2 342

推荐阅读更多精彩内容