石云华 - 博客园

2025年1月

摘要： 1、故障概述 1月征期刚开始，业务系统面临巨大压力，其中一个接口程序积压严重，并且有大量的业务超时。据业务方反馈：业务超时，将导致用户付费后，捐款成功，但无法获取确认信息，后续流程会出现失败。虽然过几天后，扣款会退还给用户，但这一故障给用户带来了极差的体验。 2、故障分析 2.1 虽然表面上是业务问阅读全文

posted @ 2025-01-13 13:31 石云华阅读(405) 评论(0) 推荐(0)

Read-only file system detection thread was hung. Cell was power cycled to stop the hang

摘要： 1、故障描述今天下午，cell10存储节点莫名其妙地自动重启了。虽然数据库没有受到影响，但仍然需要弄清楚重启的原因。以下记录整个故障的分析过程。 2、故障分析 2.1 分析操作系统日志。故障前后的操作系统日志摘要如下所示。 Jan 4 09:25:29 dm01celadm10 auditd[12 阅读全文

posted @ 2025-01-04 21:05 石云华阅读(71) 评论(0) 推荐(0)

2024年12月

Exadata存储节点，主动更换磁盘

摘要： 1、前言 Exadata存储节点，绝大部分情况下，是不需要主动更换磁盘的，当磁盘的损坏程度达到一定的判定标准，存储管理软件会自动将该磁盘判定为坏盘。注意：该判定标准不仅仅依据于磁盘的坏块errorCount。对于满足如下全部情况的环境，建议主动更换存储节点的磁盘： (1). 磁盘的errorCo 阅读全文

posted @ 2024-12-02 12:49 石云华阅读(290) 评论(0) 推荐(0)

2024年11月

OpenSSH9.2导致cluvfy命令失败

摘要： 1、案例概述同事在AIX7.1下安装11.2.0.4 GI集群时，运行cluvfy命令失败。报错信息如下： Version of exectask could not be retrieved from node "skdb1"ERROR:Remote execution files could 阅读全文

posted @ 2024-11-15 13:05 石云华阅读(121) 评论(0) 推荐(0)

GoldenGate抽取进程延迟严重，论FETCHOPTIONS NOUSESNAPSHOT的重要性

摘要： 1、案例概述同事新搭建的一套GoldenGate环境，刚刚搭建时，Extract抽取进程就已经出现延迟现象，当时想着可能很快就能追平，所以最开始也没当回事。结果两天时间，延迟现象没有缓解，已经累积延迟30多个小时。通过info 或者 stats等命令查看进程状态信息，发现该Extract抽取进程阅读全文

posted @ 2024-11-14 10:43 石云华阅读(115) 评论(0) 推荐(0)

Exadata X6-2 Normal冗余的磁盘组，不同存储节点同时损坏两块磁盘，导致ASM磁盘组dismount

摘要： 1. 故障概述早晨8点左右，驻场同事打来电话，反馈Exadata上的ACFS文件系统全部消失，所有的OGG链路全部中断，业务影响范围非常大，几乎所有的核心业务都受到影响。让同事立即检查存储软件服务状态，发现所有存储节点的存储服务运行正常，但cell07和cell09节点各自损坏了一块硬盘。听到这个阅读全文

posted @ 2024-11-13 14:26 石云华阅读(160) 评论(0) 推荐(0)

2024年9月

Exadata中的Infiniband交换机，更换完SSD模块后，交换机反复重启

摘要： 1. 故障描述客户的Exadata X5-2, 某天收到EM13c告警，提示Exadata中的Infiniband交换机出现故障。 2. 故障处理 2.1 执行showunhealthy命令后，显示告警信息。 # showunhealthy WARNING Flash disk has bad b 阅读全文

posted @ 2024-09-25 21:14 石云华阅读(127) 评论(0) 推荐(0)

11.2.0.4 RAC，手动方式安装PSU补丁

摘要： 1、前言注意：Oracle不建议客户使用手动方式进行补丁安装，客户应该使用opatch auto方式进行补丁安装工作。但是，在opatch auto的过程中如果出现问题，我们可以将本文档中的步骤作为临时解决方法。 2、故障描述客户有一套Exadata环境下的11.2.0.4 RAC，近期进行安全阅读全文

posted @ 2024-09-15 20:14 石云华阅读(167) 评论(0) 推荐(0)

YashanDB，共享集群模式部署

摘要：为了测试YashanDB的RAC模式性能到底怎样，在测试环境进行了部署，简单记录一下。 0.环境说明计算节点一192.168.0.181（业务网）192.168.10.181（心跳网）计算节点二192.168.0.182（业务网）192.168.10.182（心跳网）共享存储：/dev/yas/c1 阅读全文

posted @ 2024-09-05 18:59 石云华阅读(108) 评论(0) 推荐(0)

Exadata计算节点，系统的剩余内存越来越少

摘要： 1、故障概述某Exadata客户，负责该项目的同事反馈：该Exadata的计算节点，几乎每半年左右就会出现内存不足的现象，需要重启一次操作系统才能缓解该故障。最后几天，系统剩余的内存只有4GB左右，监控系统经常告警。客户打算最近找个停机窗口进行重启操作。 2、故障分析重启操作系统，虽然能释放内存阅读全文

posted @ 2024-09-02 21:44 石云华阅读(118) 评论(0) 推荐(0)

公告