03 2025 档案

OceanBase 系统架构
摘要：1. 核心架构特点 Shared Nothing架构：分布式部署，无中心节点 硬件要求：通用服务器+本地存储，无特殊硬件依赖 进程模型：单进程observer运行实例 数据存储： 本地文件存储数据及Redo日志 多副本存储（跨可用区） 副本间通过共识协议保持一致性 2. 集群部署架构 graph T 阅读全文
posted @ 2025-03-13 17:06 程煕 阅读(234) 评论(0) 推荐(0)
oplog是什么，有什么作用
摘要：MongoDB的oplog（操作日志）是用于实现副本集（Replica Set）数据同步的核心组件，其核心特性如下： 1. 定义与作用 功能： oplog记录所有对数据库的修改操作（如插入、更新、删除及系统命令），类似MySQL的binlog。 仅记录实际修改数据的操作，若操作未修改数据（如查询或失 阅读全文
posted @ 2025-03-13 11:59 程煕 阅读(121) 评论(0) 推荐(0)
binlog redolog undolog
摘要：binlog、redo log、undo log 是 MySQL 中三种关键日志，分别承担不同的功能，以下是它们的核心区别与作用： 1. binlog（二进制日志） 定义与层次： MySQL Server 层的日志，记录所有数据库的写操作（如 INSERT、UPDATE、DELETE），不包含查询操 阅读全文
posted @ 2025-03-13 11:51 程煕 阅读(262) 评论(0) 推荐(0)
逻辑备份 物理备份 快照备份
摘要：数据库的逻辑备份、物理备份和快照备份在实现原理、适用场景及特性上有显著区别，具体如下： 1. 逻辑备份 定义：通过导出数据库的逻辑结构（如表、索引、存储过程等）生成SQL语句或特定格式文件。 常用工具：MySQL的mysqldump、Oracle的exp/imp。 特点： 跨平台兼容：备份文件为文本 阅读全文
posted @ 2025-03-13 11:31 程煕 阅读(169) 评论(0) 推荐(0)
云数据库管控备份测试点
摘要：您提到的备份管理确实是云数据库管控平台的核心测试领域，尤其是在数据安全和容灾场景中至关重要。以下是针对备份管理功能的详细测试点补充，涵盖全量/增量备份、PITR、异地备份及不同备份方式（物理/逻辑/快照）的验证： 新增：备份管理专项测试 1. 备份类型与策略验证 全量备份 测试全量备份的完整性（如通 阅读全文
posted @ 2025-03-13 11:18 程煕 阅读(42) 评论(0) 推荐(0)
云数据库管控功能测试点
摘要：云数据库管控平台的核心功能测试点需要覆盖全生命周期管理、资源调度、安全管控、监控运维以及用户体验等多个维度。以下是详细的测试点分类和示例： 一、实例生命周期管理测试 实例创建与配置 测试不同规格（CPU、内存、存储类型）实例的创建成功率。 验证网络配置（VPC、子网、安全组）是否生效。 测试参数模板 阅读全文
posted @ 2025-03-13 11:02 程煕 阅读(113) 评论(0) 推荐(0)
云数据库管控测试点
摘要：云数据库管控测试需要覆盖多个核心领域，以确保系统的稳定性、安全性和可靠性。以下是主要测试方向及具体内容： 1. 配置管理测试 参数配置验证 测试数据库参数动态调整（如内存、连接数、缓存策略）是否生效，修改后是否需重启。 版本兼容性 验证升级/回滚流程是否平滑，兼容性测试（如新版本驱动是否适配旧版数据 阅读全文
posted @ 2025-03-13 10:58 程煕 阅读(53) 评论(0) 推荐(0)
Pandora Boot 的主要组件及其作用
摘要：Pandora Boot 是阿里巴巴开源的基于 Spring Boot 的微服务开发框架，主要用于快速构建高可用、可扩展的分布式应用。它整合了阿里内部多年微服务实践的经验，提供了一系列开箱即用的组件和工具，简化了微服务架构下的开发、部署和运维。 Pandora Boot 的核心组件及功能 以下是 P 阅读全文
posted @ 2025-03-12 11:41 程煕 阅读(250) 评论(0) 推荐(0)
TDDL DRDS PolarDB-X三者关系
摘要：TDDL、DRDS 和 PolarDB-X 是阿里巴巴集团及阿里云在分布式数据库领域逐步演进的三代技术产品，其关系可概括为 从中间件到云原生分布式数据库的技术升级路径。以下是具体分析： 1. TDDL（Taobao Distributed Data Layer） 定位与功能： TDDL 是淘宝内部早 阅读全文
posted @ 2025-03-11 17:48 程煕 阅读(153) 评论(0) 推荐(0)
GminiDB避免脏读、脏写、幻读、不可重复读
摘要：华为云GeminiDB通过多版本并发控制（MVCC）、全局事务快照和分布式锁机制，结合其存算分离架构，有效避免了脏读、脏写、不可重复读和幻读问题。以下是具体实现机制及其对ACID隔离级别的保障： 一、核心机制与架构基础 1. 多版本并发控制（MVCC） 数据版本化存储 每条数据记录包含多个版本，每个 阅读全文
posted @ 2025-03-07 14:01 程煕 阅读(68) 评论(0) 推荐(0)
GeminiDB的计存分离架构及ACID
摘要：华为云GeminiDB的存算分离架构通过**解耦计算层与存储层**，结合分布式一致性协议与智能事务管理机制，实现了高性能、高弹性与强一致的ACID特性。以下是其实现细节及对ACID的保障机制： 一、存算分离架构的实现 1. 架构分层 GeminiDB的存算分离架构由两个核心层组成： 计算层（无状态节 阅读全文
posted @ 2025-03-07 11:58 程煕 阅读(103) 评论(0) 推荐(0)
WAL在GeminiDB中的作用
摘要：### **一、WAL（预写日志）的核心概念** **WAL（Write-Ahead Logging，预写日志）** 是一种数据库事务处理技术，核心思想是**在数据实际写入存储介质（如磁盘）之前，先将事务的变更操作以日志形式持久化**。这一机制确保即使在系统崩溃或故障时，仍能通过重放日志恢复数据，保 阅读全文
posted @ 2025-03-07 10:37 程煕 阅读(65) 评论(0) 推荐(0)
华为云数据库管控服务高可靠可用实现
摘要：华为云数据库管控服务的高可靠高可用实现依赖于其分布式架构设计、多层级冗余机制以及智能化的故障自愈能力。以下从架构设计、容灾策略、监控与恢复机制三个维度详细阐述： 一、分布式架构与无单点故障设计 微服务化架构 管控服务采用微服务化设计，核心功能模块（如配置管理、任务调度、监控告警等）解耦为独立服务，各 阅读全文
posted @ 2025-03-06 17:55 程煕 阅读(99) 评论(0) 推荐(0)
MySQL的半同步复制机制
摘要：MySQL的半同步复制机制（Semisynchronous Replication）是一种在异步复制基础上增强数据一致性的技术，通过主库等待从库确认接收日志的机制，减少主从数据不一致的风险。以下是其核心实现原理及关键技术： 一、核心实现原理 ACK确认机制 主库在事务提交时，需等待至少一个从库将事务 阅读全文
posted @ 2025-03-06 15:43 程煕 阅读(163) 评论(0) 推荐(0)
华为云数据库秒级切换原理
摘要：华为云数据库主备秒级切换的实现依赖于其高可用架构设计、智能状态管理和高效的容灾机制，具体原理及关键技术如下： 一、核心实现原理 半同步复制与强一致性协议 半同步复制机制：主节点事务提交需等待至少一个备节点确认（ACK），确保事务日志持久化到备节点后才返回成功，极大降低数据丢失风险。主备节点间通过状态 阅读全文
posted @ 2025-03-06 13:55 程煕 阅读(97) 评论(0) 推荐(0)
Gemini DB节点间的同步
摘要：华为云数据库GeminiDB作为一款分布式多模NoSQL数据库，其节点间的同步与复制机制设计旨在保障数据强一致性、高可用性和弹性扩展能力。结合其计算存储分离架构和分布式技术，以下是其核心实现机制及技术细节： 一、底层架构与数据同步基础 计算存储分离架构 GeminiDB采用计算层与存储层分离的设计， 阅读全文
posted @ 2025-03-06 13:46 程煕 阅读(131) 评论(0) 推荐(0)
跨数据库复制与同步
摘要：华为云数据库的数据复制与同步机制主要通过数据复制服务（DRS）实现，其核心设计结合了多种技术手段和架构模式，以满足不同场景下的数据流通需求。以下是具体实现机制及技术要点： 一、基于DRS服务的多模式同步架构 实时同步模式 全量同步：首次同步时，将源数据库的全量数据一次性迁移到目标库，适用于初始化场景 阅读全文
posted @ 2025-03-06 11:54 程煕 阅读(116) 评论(0) 推荐(0)
华为云数据库的可靠可用性测试
摘要：华为云数据库管控的高可靠可用性测试需从数据面和管理面两个维度展开，结合其架构设计、容灾机制及智能运维能力进行验证。以下是具体测试方向及方法： 一、数据面测试 数据面测试侧重于数据存储、传输、容灾等核心能力的可靠性，确保业务连续性和数据一致性。 数据复制与同步机制测试 半同步复制验证：测试主备实例在同 阅读全文
posted @ 2025-03-06 10:35 程煕 阅读(82) 评论(0) 推荐(0)
分布式系统容灾实现
摘要：分布式服务实现容灾倒换的详细方案 一、容灾倒换的核心目标 高可用性：确保服务在故障时快速恢复，减少停机时间。 数据完整性：切换过程中避免数据丢失或损坏。 自动化：减少人工干预，提升响应速度。 透明性：对终端用户无感知或影响最小。 二、容灾倒换的关键技术实现 1. 冗余架构设计 主备模式（Active 阅读全文
posted @ 2025-03-05 10:50 程煕 阅读(476) 评论(0) 推荐(0)
分布式 微服务 云原生 三者关系
摘要：1. 核心定义与定位 概念 定义 核心特征 分布式系统 由多个独立节点（物理或虚拟）通过网络协作完成任务的系统架构 - 分散性- 自治性- 协同性- 容错性 微服务 一种软件架构风格，将单体应用拆分为多个松耦合的小型服务，每个服务独立开发、部署和扩展 - 服务解耦- 独立部署- 技术异构性- 轻量级 阅读全文
posted @ 2025-03-05 10:49 程煕 阅读(183) 评论(0) 推荐(0)
云原生与分布式
摘要：云原生开发并未完全取代传统分布式微服务开发，但已成为现代应用开发的主流趋势。两者的关系更类似于演进而非替代，云原生在继承分布式与微服务核心思想的基础上，通过技术创新和工具链完善，显著提升了开发效率与系统能力。以下是具体分析： 一、技术演进关系 分布式系统到微服务的细化 传统分布式系统通过多节点协作提 阅读全文
posted @ 2025-03-05 10:48 程煕 阅读(96) 评论(0) 推荐(0)