在 Oracle RAC 集群中,Cluster Synchronization Services(CSS)承担着节点成员身份管理和故障隔离的核心任务。CSS 并不是一个单一的服务,而是由一组进程、网络心跳、投票磁盘以及相关配置参数共同构成的协作体系。当某个节点发生异常,比如网络中断、系统挂起或者存储访问超时,CSS 必须快速判断该节点是否已经不具备继续参与集群活动的能力,并采取驱逐措施,防止多个节点同时写入共享存储导致数据损坏。

理解 CSS 的工作原理,对维护 RAC 高可用环境至关重要。很多看似与数据库无关的问题,例如节点突然重启、OCR 访问报错、集群服务无法启动等,追根溯源往往都能在 CSS 的日志或投票磁盘状态中找到线索。本文将从组成架构、心跳机制、仲裁逻辑以及故障排查几个维度,系统地梳理 CSS 集群同步服务的运行细节。
一、CSS 的组成与核心进程
CSS 的核心进程是 ocssd,它运行在集群中的每一个节点上。ocssd 进程由 Oracle Clusterware 的守护进程 init.ohasd 拉起,并以 root 或 oracle 用户身份运行,具体取决于安装时的配置。ocssd 的主要职责包括:维护集群成员列表、监控本地节点与其他节点之间的心跳通信、向投票磁盘写入心跳信息、参与仲裁计算以及在必要时执行节点驱逐。
除了 ocssd 进程本身,CSS 还依赖两个重要的外部资源:私有网络(Private Interconnect)和投票磁盘(Voting Disk)。私有网络用于节点间的心跳交换,通常使用专用的网卡或 InfiniBand 通道,以避免与公共业务流量相互干扰。投票磁盘则用于记录每个节点的健康状态,并在集群分裂时提供仲裁依据。CSS 通过读取投票磁盘中的信息以及私有网络上心跳包的响应情况,综合判断集群中哪些节点仍然存活。
可以通过 crsctl check css 命令查看 CSS 服务的运行状态。正常情况下,输出会显示所有节点上的 CSS 均为 ONLINE 状态。如果某个节点的 CSS 处于 OFFLINE 或 UNKNOWN 状态,集群服务在该节点上就无法正常工作,可能需要检查 ocssd.bin 日志或集群告警日志。
# 查看CSS服务状态 crsctl check css # 输出示例(正常情况) CRS-4529: Cluster Synchronization Services is online on node1 CRS-4529: Cluster Synchronization Services is online on node2
二、心跳机制与节点驱逐
CSS 的心跳机制分为两种:网络心跳和磁盘心跳。网络心跳通过私有网络以固定间隔发送小型 UDP 或 TCP 消息,用于实时检测节点间的连通性。磁盘心跳则是 ocssd 进程向投票磁盘写入时间戳,表明该节点在最近一段时间内仍然能够正常访问共享存储。这两种心跳共同作用,可以区分节点是单纯网络故障还是系统整体挂起。
当网络心跳丢失但磁盘心跳仍然更新时,说明节点的私有网络可能出现了故障,但操作系统和存储访问仍然正常。此时 CSS 会尝试通过其他路径确认节点状态。如果磁盘心跳也停止更新,则意味着节点已经无法访问投票磁盘,可能是操作系统崩溃、存储链路中断或者节点被强制关闭。CSS 会根据 misscount 参数指定的时间窗口判断是否触发驱逐操作。
misscount 参数定义了允许网络心跳丢失的最长时间,单位为秒。默认值受集群版本和平台影响,常见为 30 秒。当超过该时间仍未收到某个节点的心跳,CSS 会将该节点标记为不健康,并开始执行驱逐。驱逐操作通常表现为节点自动重启,这是通过向内核发送 panic 或调用 reboot 命令实现的。对于 RAC 数据库实例来说,节点被 CSS 驱逐意味着该节点上的所有会话都会中断,CRS 会尝试在剩余节点上重新分配资源。
需要注意的是,misscount 设置过小可能导致网络抖动时出现误驱逐,设置过大则会延长故障恢复时间。在修改该参数前,建议先在测试环境中模拟网络闪断场景,观察集群的容忍能力。
三、投票磁盘与仲裁逻辑
投票磁盘是 CSS 仲裁机制的物理载体,通常由奇数个(1、3、5 等)磁盘或 ASM 磁盘组组成。每个投票磁盘中保存着集群节点的注册信息和心跳时间戳。CSS 的仲裁算法假设只有能够访问多数投票磁盘的节点才具备成为集群成员的权利。这种多数派原则可以有效防止脑裂,即使集群分裂成两个或多个子集,也只有获得多数投票磁盘访问权的子集能够继续运行。
例如,一个三节点的 RAC 集群配置了 3 个投票磁盘。如果节点间的私有网络全部中断,导致集群分裂为两个子集:子集 A 包含 2 个节点且能够访问全部 3 个投票磁盘,子集 B 包含 1 个节点且磁盘访问正常。根据多数派原则,子集 A 将赢得仲裁,子集 B 的节点会被驱逐。如果两个子集各占一半节点且投票磁盘访问也各占一半,则无法形成多数派,集群会进入等待或强制关闭状态,以避免数据不一致。
可以通过 crsctl query css votedisk 命令查看投票磁盘的位置和状态。输出中会显示每个投票磁盘的路径、大小以及是否正常在线。如果某个投票磁盘出现 I/O 错误或被标记为 OFFLINE,需要及时更换或修复,否则可能影响仲裁能力。对于使用 ASM 磁盘组存放投票磁盘的环境,还需要检查 ASM 磁盘组的冗余级别是否与集群要求匹配。
# 查看投票磁盘状态 crsctl query css votedisk # 输出示例 ## STATE File Universal Id File Name Disk group -- ----- ----------------- --------- --------- 1. ONLINE 1a2b3c4d5e6f7a8b9c0d1e2f3a4b5c6 (/dev/oracleasm/disks/vote1) [DATA] 2. ONLINE 2b3c4d5e6f7a8b9c0d1e2f3a4b5c6d7 (/dev/oracleasm/disks/vote2) [DATA] 3. ONLINE 3c4d5e6f7a8b9c0d1e2f3a4b5c6d7e8 (/dev/oracleasm/disks/vote3) [DATA]
四、常见故障排查与参数调整
CSS 相关故障最典型的症状是节点无预警重启。管理员可以在节点重启后查看系统日志中的 reboot 记录,或者在 Oracle Clusterware 的告警日志中搜索 CSSD 相关的报错信息。日志文件通常位于 GRID_HOME 的 log 目录下,例如 $GRID_HOME/log/<hostname>/cssd/ocssd.bin。在日志中查找 evict、reboot、misscount 等关键字,可以快速定位触发驱逐的原因。
另一类常见问题是投票磁盘访问异常。如果磁盘路径权限发生变化、多路径软件配置错误或者存储链路抖动,ocssd 可能无法正常读写投票磁盘,进而引发节点驱逐。此时需要检查操作系统层面的磁盘权限、ASM 实例状态以及存储端的事件日志。使用 dd 命令对投票磁盘进行读取测试,可以初步判断磁盘是否可访问,但要注意测试时的读写操作可能会影响集群,建议在维护窗口内进行。
在调整 CSS 参数时,需要理解 disktimeout 与 misscount 的区别。disktimeout 表示 CSS 等待投票磁盘 I/O 完成的最长时间,默认通常为 200 秒。如果磁盘响应超过该值,CSS 会认为节点已经无法访问共享存储,从而触发驱逐。misscount 则针对网络心跳。两者分别对应存储链路故障和网络故障,调整时需要结合实际的故障类型。
下面是一个调整 misscount 参数的示例。该参数属于集群参数,需要使用 crsctl 命令修改。修改后需要重启集群才能生效,因此不建议在生产环境中随意更改。更稳妥的方式是先排查网络设备和交换机配置,确保私有网络稳定,再考虑参数层面的优化。
# 查看当前misscount值 crsctl get css misscount # 修改misscount为45秒(需重启集群生效) crsctl set css misscount 45
CSS 集群同步服务是 Oracle RAC 高可用架构的基石。掌握其心跳机制、仲裁逻辑和常见故障模式,能够帮助管理员在集群出现异常时迅速做出判断,避免因误操作或参数不当导致更严重的停机事故。建议在日常运维中定期检查 CSS 状态、投票磁盘健康度以及私有网络延迟,将隐患消除在故障发生之前。
Oracle RACCSS集群同步服务投票磁盘修改时间:2026-11-01 13:51:41