在Linux服务器集群中,高可用的数据同步能够确保多节点间数据一致性,当主节点出现故障时,从节点可以快速接管服务,避免数据丢失和业务中断。本文将以rsync作为数据同步工具,inotify作为文件变化监控工具,结合Keepalived实现高可用架构,详细讲解配置过程。

环境准备
准备两台Linux服务器,分别作为主节点和从节点,系统版本建议为CentOS 7及以上,确保两台服务器网络互通,且关闭防火墙或开放对应端口。本文示例的主节点IP为192.168.0.10,从节点IP为192.168.0.11,同步目录为/data/sync_dir。
软件安装
首先在两台节点上安装rsync和inotify-tools,同时主节点需要安装Keepalived实现高可用切换。
安装rsync
rsync是常用的数据同步工具,支持增量同步,效率较高。执行以下命令安装:
# 两台节点都执行安装命令 yum install -y rsync
安装inotify-tools
inotify-tools用于监控文件系统变化,当同步目录中的文件发生新增、修改、删除等操作时,触发rsync同步。执行以下命令安装:
# 主节点执行安装命令 yum install -y inotify-tools
安装Keepalived
Keepalived用于实现主从节点的高可用切换,当主节点故障时,自动将从节点提升为主节点。执行以下命令安装:
# 主从节点都执行安装命令 yum install -y keepalived
rsync配置
首先在从节点上配置rsync服务,作为同步的目标端。
从节点rsync配置
编辑rsync的配置文件/etc/rsyncd.conf,内容如下:
uid = root gid = root use chroot = no max connections = 10 pid file = /var/run/rsyncd.pid log file = /var/log/rsyncd.log [sync_module] path = /data/sync_dir read only = no list = yes auth users = rsync_user secrets file = /etc/rsync.pass
然后创建密码文件/etc/rsync.pass,设置用户名和密码,密码文件权限需要设置为600:
# 写入用户名和密码,格式为 用户名:密码 echo "rsync_user:123456" > /etc/rsync.pass # 设置文件权限 chmod 600 /etc/rsync.pass
启动从节点的rsync服务并设置开机自启:
systemctl start rsyncd systemctl enable rsyncd
主节点rsync密码配置
主节点需要配置rsync同步时使用的密码,不需要用户名,直接写入密码即可:
echo "123456" > /etc/rsync.pass chmod 600 /etc/rsync.pass
inotify监控脚本编写
在主节点上编写inotify监控脚本,当同步目录发生变化时,自动触发rsync同步到从节点。
#!/bin/bash
# 同步目录
SRC_DIR="/data/sync_dir/"
# 从节点rsync模块信息
RSYNC_MODULE="rsync_user@192.168.0.11::sync_module"
# 密码文件
PASS_FILE="/etc/rsync.pass"
# 启动inotify监控,监控文件的创建、删除、修改、移动事件
inotifywait -mrq --format '%Xe %w%f' -e create,delete,modify,move $SRC_DIR | while read file
do
# 执行rsync同步,使用密码文件认证,删除目标端多余文件
rsync -avz --delete --password-file=$PASS_FILE $SRC_DIR $RSYNC_MODULE
done
给脚本添加执行权限,然后后台运行脚本:
chmod +x /root/inotify_rsync.sh nohup /root/inotify_rsync.sh > /tmp/inotify_rsync.log 2>&1 &
Keepalived高可用配置
配置Keepalived实现主从节点的高可用切换,当主节点故障时,从节点自动接管同步任务。
主节点Keepalived配置
编辑主节点的Keepalived配置文件/etc/keepalived/keepalived.conf:
global_defs {
router_id node_10
}
vrrp_instance VI_1 {
state MASTER
interface eth0
virtual_router_id 51
priority 100
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
192.168.0.100
}
}
# 定义健康检查脚本,检查inotify进程是否存在
vrrp_script check_sync {
script "/etc/keepalived/check_sync.sh"
interval 2
weight -20
}
track_script {
check_sync
}
编写健康检查脚本/etc/keepalived/check_sync.sh,检查inotify监控进程是否运行:
#!/bin/bash
# 检查inotifywait进程是否存在
count=$(ps -ef | grep inotifywait | grep -v grep | wc -l)
if [ $count -eq 0 ]; then
# 进程不存在,返回失败
exit 1
else
# 进程存在,返回成功
exit 0
fi
给脚本添加执行权限:
chmod +x /etc/keepalived/check_sync.sh
从节点Keepalived配置
编辑从节点的Keepalived配置文件/etc/keepalived/keepalived.conf:
global_defs {
router_id node_11
}
vrrp_instance VI_1 {
state BACKUP
interface eth0
virtual_router_id 51
priority 90
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
192.168.0.100
}
}
启动主从节点的Keepalived服务并设置开机自启:
# 主从节点都执行 systemctl start keepalived systemctl enable keepalived
验证测试
首先在主节点的同步目录中创建测试文件,查看从节点是否同步:
# 主节点执行 mkdir -p /data/sync_dir touch /data/sync_dir/test.txt # 从节点查看 ls /data/sync_dir/
如果从节点出现test.txt文件,说明同步正常。然后停止主节点的inotify进程,查看Keepalived是否触发切换,从节点是否接管同步任务:
# 主节点执行,停止inotify进程 pkill inotifywait # 查看主节点Keepalived状态,应该会释放虚拟IP ip addr show eth0 # 查看从节点是否获取到虚拟IP ip addr show eth0
此时可以在原主节点(现在的从节点)创建文件,验证新的主节点是否同步数据到另一个节点,确认高可用切换生效。
注意事项
- 同步目录的权限需要保持一致,避免出现权限不足导致同步失败
- rsync的密码文件权限必须设置为600,否则会报错
- Keepalived的virtual_router_id主从节点必须一致,优先级数值主节点要大于从节点
- 生产环境中建议对rsync同步过程添加日志记录,方便排查问题