服务器评测实验需求：
- 4台机器安装GlusterFS组成一个集群
- 客户端把docker registry存储到文件系统里
- 4个节点的硬盘空间不整合成一个硬盘空间，要求每个节点都存储一份，保证数据安全
环境规划
server
node1:192.168.0.165 主机名:glusterfs1
node2:192.168.0.157 主机名:glusterfs2
node3:192.168.0.166 主机名:glusterfs3
node4:192.168.0.150 主机名:glusterfs4
client
192.168.0.164 主机名:master3
实验前准备
- 所有主机关闭防火墙，SElinux
- 修改hosts文件，能够互相解析
192.168.0.165 glusterfs1
192.168.0.157 glusterfs2
192.168.0.166 glusterfs3
192.168.0.150 glusterfs4
192.168.0.164 master3
安装
服务端
1.在glusterfs {1-4}节点上安装GlusrerFS软件包
# ping -c 3 0df72898-d46c-4a55-aa90-74330a00f692.ids.heibaidiguo.cn gluterd start
# chkconfig gluterd on
2.在glusterfs1节点上配置整个GlusterFS集群，把各个节点加入到集群
[root@glusterfs1 ~]# gluster peer probe glusterfs1
1 peer probe： success： on localping -c 3 0df72898-d46c-4a55-aa90-74330a00f692.ids.heibaidiguo.cn /usr/local/share/models
5.在glusterfs1上创建GlusterFS磁盘
注意：
加上replica 4就是4个节点中，每个节点都要把数据存储一次，就是一个数据存储4份，每个节点一份
如果不加replica 4，就是4个节点的磁盘空间整合成一个硬盘，
[root@glusterfs1 ~]#gluster volume create models replica 4 glusterfs1:/usr/local/share/models glusterfs2:/usr/local/share/models glusterfs3:/usr/local/share/models glusterfs4:/usr/local/share/models force
1 volume create： models： success： please start the volume to access data
6.启动
[root@glusterfs1 ~]# gluster volume start models
客户端
1.部署GlusterFS客户端并mount GlusterFS文件系统
[root@master3 ~]# ping -c 3 0df72898-d46c-4a55-aa90-74330a00f692.ids.heibaidiguo.cn Size Used Avail Use% Mounted on
/dev/vda3 289G 5.6G 284G 2% /
devtmpfs 3.9G 0 3.9G 0% /dev
tmpfs 3.9G 80K 3.9G 1% /dev/shm
tmpfs 3.9G 169M 3.7G 5% /run
tmpfs 3.9G 0 3.9G 0% /sys/fs/cgroup
/dev/vda1 1014M 128M 887M 13% /boot
glusterfs1:models 189G 3.5G 186G 2% /mnt/models
其他操作命令
删除GlusterFS磁盘
# gluster volume stop models 先停止
# gluster volume delete models 再删除
卸载GlusterFS磁盘
gluster peer detach glusterfs4
ACL访问控制
gluster volume set models auth.allow 10.60.1.*,10.70.1.*
添加GlusterFS节点
# gluster peer probe sc2-log5
# gluster peer probe sc2-log6
# gluster volume add-brick models sc2-log5:/data/gluster sc2-log6:/data/gluster
迁移GlusterFS数据
# gluster volume remove-brick models sc2-log1:/usr/local/share/models sc2-log5:/usr/local/share/models start
# gluster volume remove-brick models sc2-log1:/usr/local/share/models sc2-log5:/usr/local/share/models status
# gluster volume remove-brick models sc2-log1:/usr/local/share/models sc2-log5:/usr/local/share/models commit
修复GlusterFS数据(在节点1宕机的情况下)
# gluster volume replace-brick models sc2-log1:/usr/local/share/models sc2-log5:/usr/local/share/models commit -force
# gluster volume heal models full
使用GlusterFS作为KVM后端存储 http://www.linuxidc.com/Linux/2013-08/89108.htm
分布式存储系统GlusterFS初体验 http://www.linuxidc.com/Linux/2013-08/89107.htm
GlusterFS全局统一命名空间 http://www.linuxidc.com/Linux/2013-08/89106.htm
设计新Xlator扩展GlusterFS http://www.linuxidc.com/Linux/2013-08/89105.htm
GlusterFS Rebalance简析 http://www.linuxidc.com/Linux/2013-08/89104.htm
CentOS 6.0-x86_64下体验Glusterfs http://www.linuxidc.com/Linux/2015-01/111211.htm
GlusterFS 的详细介绍：请点这里
GlusterFS 的下载地址：请点这里
本文永久更新链接地址：http://www.linuxidc.com/Linux/2015-10/124331.htm
