vmware环境ORACLE RAC环境数据库节点1无法启动问题分析处理

近期在一个客户数据库巡检时发现ORACLE RAC环境数据库一节点故障,只有二节点在运行。

RAC环境正常安装完成后,后期典型的节点无法启动问题就是私网异常、共享存储异常等,检查机器日志可以快速定位问题;本次问题就是因为心跳网络问题导致,该环境为VMWARE虚拟化是搭建的RAC,底层硬件调整(数据库节点的虚拟机运行在了其他物理机),导致心跳网络2个节点无法联通,需要人工再调整网络策略后,集群可以正常恢复。

如下是整个排查过程:

crsctl stat res -t

crsctl stat res -t -init查看故障节点情况

  1. 首先尝试重启CRS服务并结合$ORACLE_HOME/log/alert.log日志查看

强制关闭crs

关闭日志显示如下:

启动crs:

当前日志没太多信息

  1. 查看系统日志

报ntp报错

查看了两节点时间,一节点时间快了一分钟,手工调整了一节点的时间。

  1. 查看心跳是否互通

两节点ping能通,但是traceroute不通

tracerout 二节点不通

查看cssd日志报错,报错如下:

判断是否网络打通,防火墙等情况。根据服务器信息了解,这两台为虚拟机。

查看后发现是虚拟机(出故障的一节点)网络接受功能没选择好。关闭一节点调整网络。

  1. 调整网络后重启CRS,一节点恢复
相关推荐
隔窗听雨眠3 天前
Oracle日志体系分层结构与故障定位路径
数据库·oracle·故障排查
曲径海盗4 天前
Try-Except怎么用,3个追问解答在自动化下的应用
java·jvm·oracle
爱吃奥利奥_wen7 天前
SQL Server 基础语法详解:从建库建表到约束与增删改查
服务器·数据库·oracle
x_SpiderMan7 天前
搭建Oracle RAC 集群
数据库·oracle
测试界的小码农7 天前
【图数据库实战进阶(03):Neo4j 图数据建模实战——节点、关系与属性应该怎么设计?】
数据库·oracle·neo4j
.痞老板.7 天前
mysql初阶--数据库设计
数据库·mysql·oracle
一个天蝎座 白勺 程序猿8 天前
KingbaseES数据库归档重做日志文件管理:从配置到运维的实战指南
运维·数据库·oracle·kingbasees·金仓数据库
腾科IT教育10 天前
Oracle考试全解析:OCP、OCM认证体系与核心考点备考指南
数据库·oracle·开闭原则
木棉软糖12 天前
5 步确认 TiDB 历史抽数的 Logstash 有没有真的写进 ES
elasticsearch·oracle·tidb