随笔分类 - Mysql
mysql数据库
摘要：一、双主双从架构介绍 在MySQL多主多从的架构配置中和双主双从是一样的，学会了双主双从的架构部署，多主多从的配置也同样就回了。下面以双主双从作为示例演示。其中一个主机maste1用于处理所有写请求，它的从机slave1和另外一台主机master2还有它的从机salve2负责所有读数据请求，当mas
阅读全文
摘要：一、读写分离介绍 读写分离，是把数据库的读和写分开操作，以应对不同的数据库服务器。主数据库提供写操作，从数据库提供读操作，这样能有效的减轻单台数据库的压力。 二、一主一从原理 MySQL的主从复制是基于二进制(binlog)实现的 说明1：当主服务器的MySQL执行了DML，DDL语句之后，会将数据
阅读全文
摘要：一、Mycat-web介绍 Mycat-web(现改名为Mycat-eye)是对Mycat-server提供监控服务，通过JDBC连接对Mycat,MySQL监控，监控远程服务器的cpu,内存，网络，磁盘等情况的使用。Mycat-web运行过程中需要依赖zookeeper,因此需要先安装zookee
阅读全文
摘要：一、按照月分片 使用场景为按照自然月来分片，每个自然月为一个分片，但是一年有12个月，是不是要有12个数据节点才行呢？并不是。例如我现在只有三个分片数据库，这样就可以1月在第一个数据分片中，2月在第二个数据分片中，3月在第三个数据分片中，当来到4月的时候，就会重新开始分片，4月在第一个数据分片，5月
阅读全文
摘要：一、按天分片 指定一个时间周期，将数据写入一个数据节点中，例如：第1-10天的数据，写入到第一个数据节点中，第2-20天的数据写入到第二个节点中，第3-30天的数据节点写入到第三个数据节点中。 说明1：按天分片要配置一个起始日期，一个结束日期，一个分片间隔时间三个参数 说明2：按天分片允许当前时间超
阅读全文
摘要：一、应用指定分片 此规则是在运行阶段有应用自主决定路由到那个分片，根据提供的字段，然后按照指定的规则，截取该字段的部分子字符串当做分片的依据，该分别方法比较灵活，适用于某个字段有几个特殊的字符串拼接而成的这种场景，例如：一个学校的学号：小学部的学号以0开头，形式为：0xxxxx(注意因为数据节点的索
阅读全文
摘要：一、一致性哈希分片 一致性哈希分片的实现思路和我们之前介绍的水平分表中的取模分片是类似的。只不过取模分片，采用的是利用主键和分片数进行取模运算，然后根据取模后的结果，将数据写入到不同的分片数据中。但是这种分片方式有一个局限性就只能对id是整形的数据使用，如果id是个uuid类型这个的非整形的字段，就
阅读全文
摘要：一、枚举分片 通过在配置文件中配置可能的枚举值，指定数据分布到不同数据节点上，这种方式就是枚举分片规则，本规则适用于按照省份，性别，状态拆分数据等业务 二、枚举分片案例 枚举分片需求：现有 tb_enum 表，其中有 id, username, status三个字段，其中status值为1,2,3
阅读全文
摘要：一、范围分片 根据指定的字段及其配置的范围与数据节点的对应情况，来决定该数据属于哪一个分片。 说明1：范围分片会提前提供一个分片的范围默认是0-500万是一个分片，500万-1000万是一个分片，1000万-1500万是一个分片，超过1500万要重新设置。 说明2：这个范围我们可以根据自己的需要去自
阅读全文
摘要：一、取模分片 在业务系统中，有一张日志表，业务系统每天都会产生大量的日志数据，单台服务器的数据存储即处理能力是有限的，可以对数据库表进行拆分，这时候就可以使用取模分片的策略 说明1：每个表的结构一致 说明2：每个表的数据不同 说明3：所有表的合集才是完整的数据 二、准备工作 在192.168.3.9
阅读全文
摘要：一、垂直分库场景 场景：在业务系统中，涉及一下表结构，但是由于用户与订单每天都会产生大量的数据，单台服务器的数据存储以及处理能力是有限的，可以对数据库表进行拆分，原有数据库如下 说明1：整个业务系统中的表，大致分为四个，商品信息类的表，订单相关的表，用户相关表及省市区相关的表，这里暂时将省市区的表和
阅读全文
摘要：一、schema.xml 1.1 简介 schema.xml作为Mycat中最重要的配置文件之一，涵盖了Mycat的逻辑库、逻辑表、分片规则、分片节点即数据源的配置。主要包括一下三组标签 schema标签 datanode标签 datahost标签 1.2 schema标签 用于定于Mycat实例中
阅读全文
摘要：一、mycat概述 mycat是阿里巴巴企业下的开源的，基于JAVA语言编写的MySQL数据库中间件，可以像使用MySQL一样来使用Mycat,对于开发人员来说根本感觉不到mycat的存在。之前在国内使用数据库分库分表，读写分离最主流的就是使用mycat,但是截止到今日2023-12-13日，myc
阅读全文
摘要：一、介绍 单库瓶颈：如果在项目中使用的都是单MySQL服务器，则会随着互联网及移动互联网的发展，应用系统的数据量也是成指数式增长，若采用单数据库进行存储，存在一下性能瓶颈： IO瓶颈：热点数据太多，数据库缓存不足，产生大量磁盘IO,效率低下，请求数据太多，带宽不够，网络IO瓶颈。 CPU瓶颈：排序、
阅读全文
摘要：一、主从复制概念 主从复制是指将主数据库的DDL和DML操作通过二进制日志传到从服务器中，然后在从服务器上对这些日志重新执行也叫重做，从而使得从数据库和主库的数据保持同步。 MySQL支持一台主库同时向多台从库进行赋值，从库同时也可以作为其他从服务器的主库，实现链式复制。 一般主服务器我们叫Mast
阅读全文
摘要：一、错误日志 错误日志是MySQL中最重要的日志之一，它记录了当MySQL启动和停止时，以及服务器在运行过程中发生的任何严重错误时的相关信息，当数据库出现任何故障导致无法正常使用时，建议首先查看此日志 错误日志默认是开启的，默认存在目录/var/log/，默认的日志文件名为mysqld.log, 但
阅读全文
摘要：一、系统数据库 MySQL数据库安装完成后，自带了四个数据库： mysql数据库：存储MySQL服务器正常运行所需要的各种信息如时区、主从、用户、权限等 infomation_schema：提供了访问数据库元数据的各种表和视图，包含数据库、表、字段类型及访问权限等 performance_schem
阅读全文
摘要：一、事务概念 事务是一组操作的集合，他是一个不可分割的工作单位，事务会把所有操作作为一个整体一起向系统提交或者撤销请求操作，即这些操作要么同时成功，要么同时失败。 二、事务特性 原子性（Atomicity）：事务是不可分割的最小操作单元，要么全部成功，要么全部失败 一致性（Consistency）：
阅读全文
摘要：一、前言 MySQL的服务实现通过后台多个线程、内存池、文件交互来实现对外服务的，不同线程实现不同的资源操作，各个线程相互协助，共同来完成数据库的服务。MySQL常用的后台线程概括如下，分为Master Thread，IO Thread，Purge Thread，Page Cleaner Threa
阅读全文
摘要：一、逻辑存储结构 表空间(Tablespace)：一个mysql实例，及一个数据库实例，可以对应多个表空间(ibd文件)，用于存储记录，索引等数据。 段(Segment)：分为数据段（Leaf node segment）、索引段（Non-leaf node segment）、回滚段（Rollback
阅读全文
浙公网安备 33010602011771号