day 32 综合架构存储服务章节
课程介绍:
1. rsync备份服务常见异常问题
2. rsync备份服务全网备份
3. 网站架构存储服务作用说明
4. 网站架构存储服务部署过程 NFS
5. 网站架构存储服务部署过程
6. 网站架构存储服务配置参数
知识回顾
1.rsync备份服务数据传输原理
客户端--服务端 发起请求
第一步: 客户端 --> 服务端 发送请求传输数据信息
第二步: 服务端 --> 客户端 接收到传输数据信息
第三步: 客户端 --> 服务端 发送请求传输数据信息
第四步: 服务端 --> 客户端 发送确认信息
第五步: 客户端 --> 服务端 用户携带数据通过网络进行传输
第六步: 服务端 --> 客户端 发送数据存储完毕确认信息
2.rsync相关参数
-a -r -l -L -p -t -g -o -D -v -z -P
--exclude
--exclude-from
--delete
--password-file
bwlimit
3.rsync的企业应用
-
rsync守护进程模块的建立
/etc/rsyncd.conf
systemctl restart rsyncd -
守护进程排除数据
--exclude=
--exclude-form
exclude
exclude form
3.守护进程备份模块创建子目录
rsync -avz rsync_backup@172.16.1.41::backup/oldboy
4.守护进程访问策略
a.只有白名单:只有白名单可以访问
b.只有黑名单:只阻止黑名单,其他默认访问
c.白名单黑名单都有:在白/黑名单外默认可访问
5.守护进程列表显示
list=false
隐患,会在其他客户端显示详细的模块信息
6.守护进程无差异化数据传输
--delete
作业问题:
一: 如何真正保持文件属主和属组信息不变?
1.uid gid = root
2.注释掉fake sepr = yes
3.确认备份服务端有相应用户信息(uid gid 保持一致)
二: 如何对外网用户限速
--bwlimit=KBPS
rsync -avzP --bwlimit=10 /opt/1G rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
sending incremental file list
1G
1,048,576,000 100% 10.67MB/s 0:01:33 (xfr#1, to-chk=0/1)
sent 1,019,827 bytes received 43 bytes 10,147.96 bytes/sec(限速速率 10KB/s)
total size is 1,048,576,000 speedup is 1,028.15
三: 如何修改rsync默认湍口后,依旧可以传输数据信息
方法一: rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
rsync -avz /etc/hosts rsync_bacakup@172.16.1.41:874/as_backup --password-file=/etc/rsync.password
方法二: rsync -avz /etc/hosts rsync_backup@172.16.41::backup --password-file=/etc/rsync.bassword --port=874
网站存储服务概念说明
作用说明:
1. 实现数据共享存储
2. 实现数据统一管理
3. 实现运营成本节约
原理说明: NFS存储
NFS原理.png
1. 服务端设置好共享目录
2. 客户端进行挂载
3. 数据存储客户端 --> 服务端共享目录
存储服务实现方式:
- 中小企业:
NFS: 网络文件系统 NFS客户端(本地磁盘不保存数据) -->NFS服务端 利用挂载
FTP: 文件传输协议 FTP客户端(本地磁盘保存数据) -->FTP服务端 而且配置复杂
samba: 文件共享存储 配置复杂- 大型企业: 分布式储存
Moosefs(mfs) , GllusterFS , FastDFS(关注它)
用户 10G --- 网站服务 -存储服务管理主机-(类似于raid卡) 管理存储服务拆分为多个文件快速存储(类似于磁盘)
网站存储服务部署过程
预备知识: 了解rpc服务作用--远程过程调用程序==中介(NFS客户端和NFS服务端通讯)
服务端部署过程:
- 第一个里程: 检查服务软件是否安装/安装服务软件程序
rpm -qa |grep -E "rpm|nfs" ---默认没有安装
yum -y install rpcbind nfs-utils - 第二个里程: 编写nfs配置文件
vim /etc/exports(存储目录 白名单信息权限参数信息)
/data 172.16.1.0/24(rw,sync) - 第三个里程: 创建存储目录
mkdir /data
chown -R nfsnobody.nfsnobody /data - 第四个里程: 启动服务程序
systemctl start rpcbind.service
systemctl enable rpcbind.service
systemctl start nfs
systemctl enable nfs
客户端部署过程:
- 第一个里程: 安装软件程序
yum install -y nfs-utils - 第二个里程: 检查是否有可以共享存储数据目录
showmount -e 172.16.1.31 - 第三个里程: 进行远程挂载操作
mount -t nfs 172.16.1.31:/data /mnt
[root@backup backup]# df -h
文件系统 容量 已用 可用 已用% 挂载点
172.16.1.31:/data 99G 2.9G 96G 3% /mnt
作业:
1. 扩展研究FTP服务部署搭建过程(linux windows-serve_U)
2. 扩展研究samba服务部署搭建过程
3. 如何保持存储属主和属组身份信息不变 参看nfs配置参数
4. 如何事项客户端挂载信息开机自动挂载 至少两种方法
