部署

部署请参考我的另外的博客： glusterfs 搭建使用 -虚拟机上安装_glusterfs端口号_叱咤少帅（少帅）的博客-CSDN博客

常用命令官网参考

### 
https://docs.gluster.org/en/main/CLI-Reference/cli-main/#peer-commands

常用运维命令

为存储池添加/移除服务器节点

#启动：
systemctl daemon-reload
systemctl start glusterd
 
#开机自动启动glusterd服务：
systemctl enable glusterd
 
#关闭：
systemctl stop glusterd
 
#查看状态：
systemctl status glusterd

查看卷信息

## 信任列表
gluster peer status

##  查看主机池的状态
gluster pool list

### 卷信息
gluster vol info 
gluster vol info k8s-volume
gluster volume info all  #查看所有卷信息

##
gluster vol status
gluster volume  status k8s-volume detai  # 查看详细的卷信息

# 带指标参数查看具体的指标信息
gluster volume status <VOLNAME> [detail | clients | mem | inode | fd | callpool]


## 删除卷
gluster volume delete  <VOLNAME>

## 更改传输类型
gluster volume set test-volume config.transport tcp,rdma OR tcp OR rdma

配置卷参数

gluster volume set <VOLNAME> <OPTION> <PARAMETER>
 
#eg: gluster volume quota gfs-data enable #磁盘配额开关
gluster volume set <VOLNAME> cluster.nufa enable #开启NUFA（在卷中创建任何数据之前，应启用 NUFA）

配额限制

#启用配额（先启用配额，才能设置磁盘限制）：
gluster volume quota <VOLNAME> enable
#eg: gluster volume quota test-volume enable
 
#禁用配额:
gluster volume quota <VOLNAME> disable
#eg:gluster volume quota test-volume disable
 
#设置磁盘限制：
gluster volume quota <VOLNAME> limit-usage <DIR> <HARD_LIMIT>
#eg: gluster volume quota test-volume limit-usage /data 10GB
 
#查看磁盘限制信息：
gluster volume quota <VOLNAME> list
#eg: gluster volume quota test-volume list
#eg: gluster volume quota test-volume list /dat
 
#删除磁盘限制：
gluster volume quota <VOLNAME> remove <DIR>
#eg: gluster volume quota test-volume remove /data

扩展/收缩卷

# 扩展卷：
gluster volume add-brick <VOLNAME> <NEW-BRICK>
#eg: gluster volume add-brick test-volume server4:/exp4
 
#收缩卷（先将数据迁移到其它可用的Brick，迁移结束后才将该Brick移除）：
gluster volume remove-brick <VOLNAME> <BRICKNAME> start
#eg: gluster volume remove-brick test-volume server2:/exp2 start
 
#查看移除进度Brick的状态：
gluster volume remove-brick <VOLNAME> <BRICKNAME> status
#eg: gluster volume remove-brick test-volume server2:/exp2 status
 
#状态显示“已完成”后，提交删除砖操作：
gluster volume remove-brick <VOLNAME> <BRICKNAME> commit
#eg: gluster volume remove-brick test-volume server2:/exp2 commit

挂载/卸载卷

• -t : 表示挂载类型

# 客户端以glusterfs方式挂载
mount -t glusterfs <SERVER>:/<VOLNAME> <MOUNTDIR>
 
# 带传输方式挂载
mount -t glusterfs -o transport=rdma <SERVER>:/<VOLNAME> <MOUNTDIR>
#例如：若要使用 rdma 传输进行挂载，请使用以下命令：
#eg: mount -t glusterfs -o transport=rdma server1:/test-volume /mnt/glusterfs
 
# 卸载卷
umount <MOUNTDIR>

重新均衡卷

# 在任何 Gluster 服务器上启动重新平衡操作:
gluster volume rebalance <VOLNAME> fix-layout start
#eg: gluster volume rebalance test-volume fix-layout start
 
#在任一服务器上启动重新平衡操作:
gluster volume rebalance <VOLNAME> start
#eg: gluster volume rebalance test-volume start
 
#在任一服务器上强制启动迁移操作:
gluster volume rebalance <VOLNAME> start force
#eg: gluster volume rebalance test-volume start force
 
#检查重新平衡操作后的状态:
gluster volume rebalance <VOLNAME> status
#eg: gluster volume rebalance test-volume status
#当status栏显示“in progress”,则重新平衡操纵尚未完成
#当status栏显示“completed”，则已完成重新平衡操作
 
#停止重新平衡操作：
gluster volume rebalance <VOLNAME> stop
#eg: gluster volume rebalance test-volume stop

复制时触发自我修复

#仅在需要修复的文件上触发自我修复：
gluster volume heal
#eg: gluster volume heal test-volume
#在卷的所有文件上触发自我修复：
gluster volume heal <VOLNAME> full
#eg：gluster volume heal test-volume full
#查看需要修复的文件列表：
gluster volume heal <VOLNAME> info
#eg: gluster volume heal test-volume info
#查看自我修复的文件列表：
gluster volume heal <VOLNAME> info healed
#eg：gluster volume heal test-volume info healed
#查看特定卷的自我修复失败的文件列表：
gluster volume heal <VOLNAME> info failed
#eg: gluster volume heal test-volume info failed
#查看指定卷中处于脑裂状态的文件列表：
gluster volume heal <VOLNAME> info split-brain
#eg: gluster volume heal test-volume info split-brain

更换有故障的Brick

#步骤1-添加新的Brick:
gluster volume add-brick <VOLNAME> <NEW-BRICK>
#eg:gluster volume add-brick test-volume server4:/exp4
 
#步骤2-移除问题Brick:
gluster volume remove-brick <VOLNAME> <BRICKNAME> start
#eg:gluster volume remove-brick test-volume server2:/exp2 start
 
#步骤3-查看移除进度Brick的状态：
gluster volume remove-brick <VOLNAME> <BRICKNAME> status
#eg:gluster volume remove-brick test-volume server2:/exp2 status
 
#步骤4-状态显示“已完成”后，提交删除砖操作：
gluster volume remove-brick <VOLNAME> <BRICKNAME> commit
#eg:gluster volume remove-brick test-volume server2:/exp2 commit

监控命令

#开启监控命令，先启动监控命令，后面的命令才能执行：
gluster volume profile <VOLNAME>  start
#eg: gluster volume profile test-volume start
 
#显示I/O信息
gluster volume profile <VOLNAME> info
#eg: gluster volume profile test-volume info
 
#关闭监控命令：
gluster volume profile <VOLNAME>  stop
#eg: gluster volume profile test-volume stop

监控命令top

#完整命令
gluster volume top <VOLNAME> {open|read|write|opendir|readdir|clear} [nfs|brick <brick>] [list-cnt <value>] | {read-perf|write-perf} [bs <size> count <count>] [brick <brick>] [list-cnt <value>]
 
#查看打开的 fd数量和最大的fd数量，并列出前10条
gluster volume top <VOLNAME> open [brick <BRICK>] [list-cnt <COUNT>]
#eg: gluster volume top test-volume open brick server2:/exp2 list-cnt 10
 
#查看最高文件读取调用
gluster volume top <VOLNAME> read [brick <BRICK>] [list-cnt <COUNT>]
#eg: gluster volume top test-volume read brick server2:/exp2 list-cnt 10
 
#查看最高文件写入调用
gluster volume top <VOLNAME> write [brick <BRICK>] [list-cnt <COUNT>]
#eg: gluster volume top test-volume write brick server2:/exp2 list-cnt 10
 
#查看目录上的最高打开调用数
gluster volume top <VOLNAME> opendir [brick <BRICK>] [list-cnt <COUNT>]
#eg: gluster volume top test-volume opendir brick server2:/exp2 list-cnt 10
 
#查看目录上的最高读取调用
gluster volume top <VOLNAME> test-volume readdir [brick BRICK] [list-cnt {0..100}]
#eg: gluster volume top test-volume readdir brick server2:/exp2 list-cnt 10
 
#查看每个块上的读取性能列表
gluster volume top <VOLNAME> read-perf [bs <BLOCK-SIZE> count <COUNT>] [brick <BRICK>] [list-cnt <COUNT>]
#eg: gluster volume top test-volume read-perf bs 256 count 1  brick server2:/exp2  list-cnt 10
 
#查看每个块上的写入性能列表
gluster volume top <VOLNAME> write-perf [bs <BLOCK-SIZE> count <COUNT>] [brick <BRICK>] [list-cnt <COUNT>]
#eg: gluster volume top test-volume write-perf bs 256 count 1  brick server2:/exp2  list-cnt 10

更新内存缓存大小

#在软超时的情况下，每N秒刷新一次volume的内存缓存大小
gluster volume set <VOLNAME> features.soft-timeout <time>
 
#在硬超时的情况下，每N秒刷新一次volume的内存缓存大小
gluster volume set <VOLNAME> features.hard-timeout <time>
# eg：在硬超时的情况下每 5 秒更新一次volume的内存缓存大小
# gluster volume set test-volume features.hard-timeout 5

设置警报时间

警报时间是您希望在达到软限制后记录使用情况信息的频率。
#设置警报时间（默认警报时间为一周）：
gluster volume quota <VOLNAME> alert-time <time>
 
#要将警报时间设置为一天：
# eg: gluster volume quota test-volume alert-time 1d

快照命令

GlusterFS 卷快照功能基于精简配置的 LVM 快照。官网要求，要使用快照功能，GlusterFS 卷应满足以下要求先决条件：每个块都应位于独立的精简配置的 LVM 上。
Brick LVM 不应包含除Brick以外的任何其他数据。任何Brick都不应该放在厚重的 LVM 上。

#创建快照：
gluster snapshot create <snapname> <volname> [no-timestamp] [description <description>]
 
#快照克隆
gluster snapshot clone <clonename> <snapname>
 
#恢复快照
gluster snapshot restore <snapname>
 
#删除快照
gluster snapshot delete (all | <snapname> | volume <volname>)
 
#查看快照列表：
gluster snapshot list [volname]
 
#查看快照信息：
gluster snapshot info [(snapname | volume <volname>)]
 
#查看快照状态：
gluster snapshot status [(snapname | volume <volname>)]
 
#配置快照
snapshot config [volname] ([snap-max-hard-limit <count>] [snap-max-soft-limit <percent>])
                            | ([auto-delete <enable|disable>])
                            | ([activate-on-create <enable|disable>])
 
#激活快照
gluster snapshot activate <snapname>
 
#停用快照
gluster snapshot deactivate <snapname>
 
#访问快照的2种方式：
mount -t glusterfs <hostname>:/snaps/<snap-name>/<volume-name> <mount-path>
#eg: mount -t glusterfs host1:/snaps/my-snap/vol /mnt/snapshot
 
#设置用户可用性，默认从隐藏目录.snaps访问快照
gluster volume set <volname> snapshot-directory <new-name>