1.为什么使用gluster

nfs对比Glusterfs

nfs：单点故障，扩容难

Glusterfs：有多个节点，无单点故障，扩容简单，加存储节点即可，3个节点起步

2.什么是Glusterfs

Glusterfs是一个开源分布式文件系统，具有强大的横向扩展能力，可支持PB存储容量和数千客户端，通过网络互联组成一个并行的网络文件系统，具有可扩展性，高性能，高可用性等特点。

第二章：配置分布式复制卷

环境准备：

gfs节点IP	172.16.1.31	172.16.1.32	172.16.1.33
gfs节点主机名	gfs-node1	gfs-node2	gfs-node3
客户端主机	随意

1.安装glusterfs

所有节点（包括客户端）：
yum -y install centos-release-gluster
yum -y install glusterfs-server
systemctl start glusterd
systemctl enable glusterd
注：添加两块新的磁盘进行挂载，此处示例创建两个目录用于存储数据
mkdir -p /gfs/test1
mkdir -p /gfs/test2

2.将节点添加进存储资源池(以下所有操作请复制EXAMPLE中的内容)

 注：主机名要做host解析（所有节点包括客户端）
hosts文件：
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
172.16.1.31 gfs-node1
172.16.1.32 gfs-node2
172.16.1.33 gfs-node3
EXAMPLE:
 echo "172.16.1.31 gfs-node1" >> /etc/hosts
 echo "172.16.1.32 gfs-node2" >> /etc/hosts
 echo "172.16.1.33 gfs-node3" >> /etc/hosts
1.gluster pool list #查看资源池
2.gluster peer probe +ip/主机名 #将存储节点添加进存储资源池，每个节点的存储资源池一致。（在一台机器上添加即可）
EXAMPLE:
 gluster peer probe gfs-node1
 gluster peer probe gfs-node2
 gluster peer probe gfs-node3
 gluster pool list

3. 分布式复制卷

1.创建分布式复制卷（可以随意创建n个卷）

1.目录进行分布式存储
gluster volume create 卷名 replica 2[复制的份数，此处复制2份] 存储节点 force
EXAMPLE：
 gluster volume create test replica 2 gfs-node1:/gfs/test1 gfs-node1:/gfs/test2 gfs-node2:/gfs/test1 gfs-node2:/gfs/test2 force

2.启动卷

gluster volume start 卷名
EXAMPLE:
 gluster volume start test

3.查看卷

gluster volume info 卷名   #查看卷的详细信息
EXAMPLE:
 gluster volume info test

gluster volume status 卷名 #查看卷的状态
EXAMPLE:
 gluster volume status test

4.客户端操作：挂载卷:系统默认不支持glusterfs文件系统，客户端需要安装glusterfs，也需要host解析。

mount -t glustefs IP:/卷名 挂载目录
EXAMPLE:
 mount -t glusterfs 172.16.1.31:/test /mnt

5.写入文件进行测试
6.分布式复制卷扩容

1.扩容前查看容量：df -h
2.扩容命令：gluster volume add-brick 卷名 节点名 force
EXAMPLE:
 gluster volume add-brick test gfs-node3:/gfs/test1 gfs-node3:/gfs/test2 force
3.扩容之后查看容量： df -h

7.分布式复制卷的最佳实践：
1)搭建条件

• 块服务器的数量必须是复制的倍数
• 将按块服务器的排列顺序指定相邻的块服务器成为彼此的复制例如，8台服务器：
• 当复制副本为2时，按照服务器列表的顺序，服务器1和2作为一个复制,3和4作为一个复制,5和6作为一个复制,7和8作为一个复制
• 当复制副本为4时，按照服务器列表的顺序，服务器1/2/3/4作为一个复制,5/6/7/8作为一个复制
  2)创建分布式复制卷
  磁盘存储的平衡平衡布局是很有必要的，因为布局结构是静态的，当新的 bricks 加入现有卷，新创建的文件会分布到旧的 bricks 中，所以需要平衡布局结构，使新加入的 bricks 生效。布局平衡只是使新布局生效，并不会在新的布局中移动老的数据，如果你想在新布局生效后，重新平衡卷中的数据，还需要对卷中的数据进行平衡。</pre>

8.以上使用目录作为存储节点，不同主机磁盘作为存储节点参考：https://www.ckhomepage.xyz/?p=107