第一章：Gluster介绍
1.为什么使用gluster
nfs对比Glusterfs
nfs：单点故障，扩容难
Glusterfs：有多个节点，无单点故障，扩容简单，加存储节点即可，3个节点起步
2.什么是Glusterfs
Glusterfs是一个开源分布式文件系统，具有强大的横向扩展能力，可支持PB存储容量和数千客户端，通过网络互联组成一个并行的网络文件系统，具有可扩展性，高性能，高可用性等特点。
第二章：配置分布式复制卷g
环境准备：
| gfs节点IP | 172.16.1.31 | 172.16.1.32 | 172.16.1.33 |
|---|---|---|---|
| gfs节点主机名 | gfs-node1 | gfs-node2 | gfs-node3 |
| 客户端主机 | 随意 |
1.安装glusterfs
所有节点（包括客户端）：
yum -y install centos-release-gluster
yum -y install glusterfs-server
systemctl start glusterd
systemctl enable glusterd
注：添加两块新的磁盘进行挂载，此处示例创建两个目录用于存储数据
mkdir -p /gfs/test1
mkdir -p /gfs/test2
2.将节点添加进存储资源池(以下所有操作请复制EXAMPLE中的内容)
注：主机名要做host解析（所有节点包括客户端）
hosts文件：
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
172.16.1.31 gfs-node1
172.16.1.32 gfs-node2
172.16.1.33 gfs-node3
EXAMPLE:
echo "172.16.1.31 gfs-node1" >> /etc/hosts
echo "172.16.1.32 gfs-node2" >> /etc/hosts
echo "172.16.1.33 gfs-node3" >> /etc/hosts
1.gluster pool list #查看资源池
2.gluster peer probe +ip/主机名 #将存储节点添加进存储资源池，每个节点的存储资源池一致。（在一台机器上添加即可）
EXAMPLE:
gluster peer probe gfs-node1
gluster peer probe gfs-node2
gluster peer probe gfs-node3
gluster pool list
3. 分布式复制卷
1.创建分布式复制卷（可以随意创建n个卷）
1.目录进行分布式存储
gluster volume create 卷名 replica 2[复制的份数，此处复制2份] 存储节点 force
EXAMPLE：
gluster volume create test replica 2 gfs-node1:/gfs/test1 gfs-node1:/gfs/test2 gfs-node2:/gfs/test1 gfs-node2:/gfs/test2 force
2.启动卷
gluster volume start 卷名
EXAMPLE:
gluster volume start test
3.查看卷
gluster volume info 卷名 #查看卷的详细信息
EXAMPLE:
gluster volume info test
gluster volume status 卷名 #查看卷的状态
EXAMPLE:
gluster volume status test
4.客户端操作：挂载卷:系统默认不支持glusterfs文件系统，客户端需要安装glusterfs，也需要host解析。
mount -t glustefs IP:/卷名 挂载目录
EXAMPLE:
mount -t glusterfs 172.16.1.31:/test /mnt
5.写入文件进行测试
6.分布式复制卷扩容
1.扩容前查看容量：df -h
2.扩容命令：gluster volume add-brick 卷名 节点名 force
EXAMPLE:
gluster volume add-brick test gfs-node3:/gfs/test1 gfs-node3:/gfs/test2 force
3.扩容之后查看容量： df -h
7.分布式复制卷的最佳实践：
1)搭建条件
- 块服务器的数量必须是复制的倍数
- 将按块服务器的排列顺序指定相邻的块服务器成为彼此的复制例如，8台服务器：
- 当复制副本为2时，按照服务器列表的顺序，服务器1和2作为一个复制,3和4作为一个复制,5和6作为一个复制,7和8作为一个复制
- 当复制副本为4时，按照服务器列表的顺序，服务器1/2/3/4作为一个复制,5/6/7/8作为一个复制
2)创建分布式复制卷
磁盘存储的平衡平衡布局是很有必要的，因为布局结构是静态的，当新的 bricks 加入现有卷，新创建的文件会分布到旧的 bricks 中，所以需要平衡布局结构，使新加入的 bricks 生效。布局平衡只是使新布局生效，并不会在新的布局中移动老的数据，如果你想在新布局生效后，重新平衡卷中的数据，还需要对卷中的数据进行平衡。
8.以上使用目录作为存储节点，不同主机磁盘作为存储节点参考：https://www.ckhomepage.xyz/?p=107
