mysql8 主从的生产环境安装
环境准备
基础环境的配置请在所有节点执行。
1.修改机器名:
hostnamectl set-hostname mysql01
修改hosts
2.关闭swap
swapoff -a
注释掉/etc/fstab中swap行
3.配置NTP。
需保证数据库集群时间一致,此处因服务器居于vmware由vmtools同步时间,故略过。
下载安装包。
在https://downloads.mysql.com/archives/community/下载msyql8.0.20
https://cdn.mysql.com/archives/mysql-8.0/mysql-8.0.20-1.el7.x86_64.rpm-bundle.tar
安装mysql(两个节点)
此处将mysql-8.0.20-1.el7.x86_64.rpm-bundle.tar解压至data目录。
yum install -y perl-JSON
rpm -e mariadb-libs --nodeps
cd /data
yum install -y mysql-community-*
chown命令必须在安装mysql-server之后,因为此时才有mysql用户。
mkdir -p /data/mysql/
chown -R mysql:mysql /data/mysql/
主库配置
安装完毕后,默认配置文件为/etc/my.cnf
[mysqld]
port=3306
datadir=/data/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
slow_query_log=1
long_query_time=1
#log_queries_not_using_indexes=1
server_id=185
gtid_mode=ON
enforce_gtid_consistency=ON
binlog_checksum=NONE
#开启binlog且配置为row模式。默认情况salve不将从master获取的更新写入binlog,此处配置log_slave_updates为开启。一般用于某节点即做slave又做master
log_bin=binlog
log_slave_updates=ON
binlog_format=ROW
#下面两条配置表示主从状态信息存于表中
master_info_repository=TABLE
relay_log_info_repository=TABLE
innodb_buffer_pool_size= 51539607552
#BP配置为48G,为实例物理内存80%
service mysqld start
grep password /var/log/mysqld.log 得到临时密码,登陆,
/var/log/mysqld.log 取决于my.cnf中的log-error配置项。
grep password /data/mysql/mysql-error.log
mysql -uroot -p
#修改root密码和认证插件
ALTER USER 'root'@'localhost' IDENTIFIED with mysql_native_password BY '你的密码';
#创建主从复制专用账号repl并授权
create user 'repl'@'%' identified with mysql_native_password by '你的密码';
grant replication slave on *.* to 'repl'@'%';
从库配置
[mysqld]
port=3306
datadir=/data/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
slow_query_log=1
long_query_time=1
#log_queries_not_using_indexes=1
server_id=186
gtid_mode=ON
enforce_gtid_consistency=ON
binlog_checksum=NONE
#开启binlog且配置为row模式。默认情况salve不将从master获取的更新写入binlog,此处配置log_slave_updates为开启。一般用于某节点即做slave又做master
log_bin=binlog
log_slave_updates=ON
binlog_format=ROW
#下面两条配置表示主从状态信息存于表中
master_info_repository=TABLE
relay_log_info_repository=TABLE
innodb_buffer_pool_size= 51539607552
#BP配置为48G,为实例物理内存80%
service mysqld start
grep password /var/log/mysqld.log 得到临时密码,登陆,
#修改root密码和认证插件
ALTER USER 'root'@'localhost' IDENTIFIED with mysql_native_password BY '你的密码';
#创建主从复制专用账号repl并授权
create user 'repl'@'%' identified with mysql_native_password by '你的密码';
grant replication slave on *.* to 'repl'@'%';
change master to master_host='192.168.0.185',master_user='repl',master_password='你的密码';
start slave;
#查看主从复制状态。主要观察Slave_IO_Running Slave_SQL_Running 是否为yes
show slave status \G;
测试主从复制
登陆master库,创建test库,查看slave节点是否同步创建。
主库
create database test;
use test;
CREATE TABLE test
(
id INT(11),
name VARCHAR(25),
deptId INT(11),
salary FLOAT
);
从库
show databases;
desc test.test
备份与恢复
安装xtrabackup
备份脚本依赖于xtrabackup,需先安装
离线安装xtarbackup,xtarbackup8.0.14支持mysql8.0.22以下版本(不包括8.0.22)
下载链接:https://www.percona.com/downloads/Percona-XtraBackup-LATEST/#
安装时报错缺少某些依赖,直接yum安装即可。
报错缺少libmysqlclient.so.18()(64bit),需要安装Percona-XtraDB-Cluster-shared-55-5.5.37-25.10.756.el6.x86_64.rpm这个包即可
wget http://www.percona.com/redir/downloads/Percona-XtraDB-Cluster/5.5.37-25.10/RPM/rhel6/x86_64/Percona-XtraDB-Cluster-shared-55-5.5.37-25.10.756.el6.x86_64.rpm
rpm -ivh Percona-XtraDB-Cluster-shared-55-5.5.37-25.10.756.el6.x86_64.rpm
备份脚本
第一次启动时做全量备份,后续每周日早上3点做全量,其他日期做增量备份。注意修改变量如backup_dir,mysql_sock等与实际一致
备份脚本 /usr/sbin/mysql_backup.sh 内容如下。
#!/bin/bash
set -x
set -e
PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin
export PATH
backup_dir="/data/backup"
mysql_cnf="/etc/my.cnf"
mysql_user="root"
mysql_password="你的密码"
mysql_sock="/var/lib/mysql/mysql.sock"
backup_week_year=$(date +%U)
backup_day_week=$(date +%u)
backup_application="xtrabackup"
return_value=0
if [ $# -lt "1" ];then
echo "arg error!"
fi
full_backup(){
if [ ! -d ${backup_dir}/${backup_week_year}/$(date +%F)_0 ]; then
mkdir ${backup_dir}/${backup_week_year}/$(date +%F)_0 -p
${backup_application} --defaults-file=${mysql_cnf} --backup --no-timestamp --user=${mysql_user} --password=${mysql_password} --socket=${mysql_sock} --target-dir=${backup_dir}/${backup_week_year}/$(date +%F)_0 >/dev/null 2>&1
if [ `echo $?` -ne ${return_value} ];then
echo "Backup Error" > /tmp/MySQL_Innodb_backupex.txt
fi
fi
}
incremental_backup(){
if [ ! -d ${backup_dir}/${backup_week_year}/$(date +%F)_${backup_day_week} ]; then
mkdir ${backup_dir}/${backup_week_year}/$(date +%F)_${backup_day_week} -p
if [ ! -d ${backup_dir}/${backup_week_year}/$(date -d "1 day ago" +%F)_$(($backup_day_week - 1)) ]; then
${backup_application} --defaults-file=${mysql_cnf} --backup --no-timestamp --user=${mysql_user} --password=${mysql_password} --socket=${mysql_sock} --target-dir=${backup_dir}/${backup_week_year}/$(date +%F)_${backup_day_week} >/dev/null 2>&1
if [ `echo $?` -ne ${return_value} ];then
echo "Backup Error" > /tmp/MySQL_Innodb_backupex.txt
fi
else
${backup_application} --defaults-file=${mysql_cnf} --backup --no-timestamp --user=${mysql_user} --password=${mysql_password} --socket=${mysql_sock} --incremental-basedir=${backup_dir}/${backup_week_year}/$(date -d "1 day ago" +%F)_$(($backup_day_week - 1)) --target-dir=${backup_dir}/${backup_week_year}/$(date +%F)_${backup_day_week} >/dev/null 2>&1
if [ `echo $?` -ne ${return_value} ];then
echo "Backup Error" > /tmp/MySQL_Innodb_backupex.txt
fi
fi
fi
}
case $1 in
Backup)
if [ ${backup_day_week} -eq "7" ]; then
full_backup
else
incremental_backup
fi
;;
Init)
full_backup
;;
*)
echo "Usage:$0(Backup|Recovery)"
;;
esac
设置计划任务
crontab -e
#每日备份
0 3 * * * /bin/sh /usr/sbin/mysql_backup.sh Backup >/dev/null 2>&1
#每周二删除上周备份
0 4 * * 2 /bin/sh /usr/sbin/mysql_backup_delete.sh >/dev/null 2>&1
mysql_backup_delete.sh脚本内容为
#!/bin/bash
rm -rf /data/backup/$(date -d "1 week ago" +%U)
数据恢复步骤
查询最近的备份。
1月13日查询结果如下,目录名02表示当前是第三周,2021-01-10_0为周日早上3点的全量备份,后面三个依次为增量备份。
[root@mysql02 ~]# ll /data/backup/02
total 16
drwxr-xr-x 6 root root 4096 Jan 10 03:00 2021-01-10_0
drwxr-xr-x 6 root root 4096 Jan 11 03:00 2021-01-11_1
drwxr-xr-x 6 root root 4096 Jan 12 03:00 2021-01-12_2
drwxr-xr-x 6 root root 4096 Jan 13 03:00 2021-01-13_3
恢复备份
#在备份机执行
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/02/2021-01-10_0
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/02/2021-01-10_0 --incremental-dir=/data/backup/02/2021-01-11_1
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/02/2021-01-10_0 --incremental-dir=/data/backup/02/2021-01-12_2
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/02/2021-01-10_0 --incremental-dir=/data/backup/02/2021-01-13_3
#若是本机恢复,则直接执行下面--copy-back命令
#xtrabackup --copy-back --target-dir=/data/backup/02/2021-01-10_
#若异机恢复,参考下面步骤
#需先安装mysql,此处假定在192.168.0.190上安装msyql,且数据目录也在/data/mysql/。具体安装过程见本文档第一章节。
rsync -avrP /data/backup/02/2021-01-10_0/ root@192.168.0.190:/data/mysql/
#在192.168.0.190上启动mysql
service mysqld start
利用xtrabackup备份并重建同步关系(适用场景为主从复制失败后重建或新增加从节点)
官方从0开始重建一个新从节点文档(基于binlog和pos)看这里: https://www.percona.com/doc/percona-xtrabackup/8.0/howtos/setting_up_replication.html
新建或重建复制关系(基于GTID)看这里:https://www.percona.com/doc/percona-xtrabackup/8.0/howtos/recipes_ibkx_gtid.html
以下三条命令在主节点执行
备份
xtrabackup --host=192.168.0185 --user=root --password=你的密码 --default-file=/etc/my.cnf --backup --slave-info --no-timestamp --target-dir=/data/dbbackup/fullbackup/
拷贝到备机
rsync -avpP /data/dbbackup/fullbackup/ root@192.168.0.186:/data/backup/fullbackup/
查询binglog复制点
cat /data/dbbackup/fullbackup/xtrabackup_info |grep binlog
binlog_pos = filename 'binlog.000021', position '192', GTID of the last change 'ef146d04-2ef4-11eb-a040-005056912dc9:1-2064187'
以下命令在slave节点执行
停止数据库
mysqladmin -uroot -p你的密码 shutdown
还原备份文件
xtrabackup --prepare --target-dir=/data/backup/fullbackup/
xtrabackup --copy-back --target-dir=/data/backup/fullbackup/
启动数据库
systemctl start mysqld
启动复制1(传统基于log pos方式,不推荐)
mysql -uroot -p你的密码
change master to master_host='192.168.0.185',master_user='repl',master_password='你的密码',master_log_file='binlog.000021',master_log_pos=192;
此处可使用gtid的方式启动主从复制CHANGE MASTER TO
MASTER_HOST=host_name MASTER_PORT=port MASTER_USER=user_name MASTER_PASSWORD=password master_auto_position=1
start slave
启动复制2(基于GTID,推荐)
在主库show master status 查看gtid。
从库设置跳过
set @@global.gtid_purged='0003be53-e103-11e7-9374-7cd30ab49ab8:1-209325833
change master to master_host='192.168.0.185',master_user='repl',master_password='你的密码',master_auto_position=1;
start slave
检查同步关系
在主库任意修改一条数据,看从库是否同步到修改
日常运维命令
从库
mysqladmin -uroot -p你的密码 stop-slave
mysqladmin -uroot -p你的密码 shutdown
主库
mysqladmin -uroot -p你的密码 shutdown
Mysql8常见优化项目参考
#集群需配置NTP,主机需关闭swap
#以16C64Gmysql8为例
#阿里内存64G,移动云内存256G
#阿里云版本8,移动云版本5.7.27
[client]
port = 3306
socket = /tmp/mysql.sock
[mysqld]
port = 3306
socket = /tmp/mysql.sock
basedir = /usr/local/mysql
datadir = /data/mysql
pid-file = /data/mysql/mysql.pid
user = mysql
log_timestamps=SYSTEM
#日志时区跟随系统,避免查日志时时差8小时
bind-address = 0.0.0.0
server-id = 1 #表示是本机的序号为1,一般来讲就是master的意思
skip-name-resolve = no
# 禁止MySQL对外部连接进行DNS解析,使用这一选项可以消除MySQL进行DNS解析的时间。但需要注意,如果开启该选项,
# 则所有远程主机连接授权都要使用IP地址方式,否则MySQL将无法正常处理连接请求
# 也可以消除error里IP无法解析为域名的warning
#skip-networking
back_log = 3000
# 阿里云值为3000
# 移动云值为10000
# MySQL能有的连接数量。当主要MySQL线程在一个很短时间内得到非常多的连接请求,这就起作用,
# 然后主线程花些时间(尽管很短)检查连接并且启动一个新线程。back_log值指出在MySQL暂时停止回答新请求之前的短时间内多少个请求可以被存在堆栈中。
# 如果期望在一个短时间内有很多连接,你需要增加它。也就是说,如果MySQL的连接数据达到max_connections时,新来的请求将会被存在堆栈中,
# 以等待某一连接释放资源,该堆栈的数量即back_log,如果等待连接的数量超过back_log,将不被授予连接资源。
# 另外,这值(back_log)限于您的操作系统对到来的TCP/IP连接的侦听队列的大小。
# 你的操作系统在这个队列大小上有它自己的限制(可以检查你的OS文档找出这个变量的最大值),试图设定back_log高于你的操作系统的限制将是无效的。
max_connections = 1000
# 阿里云值为 16520
# 移动云值为 60000
# MySQL的最大连接数,如果服务器的并发连接请求量比较大,建议调高此值,以增加并行连接数量,当然这建立在机器能支撑的情况下,因为如果连接数越多,介于MySQL会为每个连接提供连接缓冲区,就会开销越多的内存,所以要适当调整该值,不能盲目提高设值。可以过'conn%'通配符查看当前状态的连接数量,以定夺该值的大小。
max_connect_errors = 100
# 参考阿里云环境设置为100,因为客户端基本都为内网环境,网络状态良好。
# 移动云值为100
# 对于同一主机,如果有超出该参数值个数的中断错误连接,则该主机将被禁止连接。如需对该主机进行解禁,执行:FLUSH HOST。
open_files_limit = 65535
# MySQL打开的文件描述符限制,默认最小1024;当open_files_limit没有被配置的时候,比较max_connections*5和ulimit -n的值,哪个大用哪个,
# 当open_file_limit被配置的时候,比较open_files_limit和max_connections*5的值,哪个大用哪个。
table_open_cache = 2000
# 阿里云值为2000
# 移动云值为2000
# MySQL每打开一个表,都会读入一些数据到table_open_cache缓存中,当MySQL在这个缓存中找不到相应信息时,才会去磁盘上读取。默认值64
# 假定系统有200个并发连接,则需将此参数设置为200*N(N为每个连接所需的文件描述符数目);
# 当把table_open_cache设置为很大时,如果系统处理不了那么多文件描述符,那么就会出现客户端失效,连接不上
max_allowed_packet = 1073741824
# 阿里云值为1G即1073741824
# 移动云值为1G即1073741824
# 接受的数据包大小;增加该变量的值十分安全,这是因为仅当需要时才会分配额外内存。例如,仅当你发出长查询或MySQLd必须返回大的结果行时MySQLd才会分配更多内存。
# 该变量之所以取较小默认值是一种预防措施,以捕获客户端和服务器之间的错误信息包,并确保不会因偶然使用大的信息包而导致内存溢出。
binlog_cache_size = 1M
# 阿里云值为2M
# 移动云值为32k=32768
# 事务在没有提交的时候,产生的日志,记录到Cache中;等到事务提交需要提交的时候,则把日志持久化到磁盘。默认binlog_cache_size大小32K
max_heap_table_size = 8M
# 阿里云值为64M
# 移动云值为64M=67108864
# 定义了用户可以创建的内存表(memory table)的大小。这个值用来计算内存表的最大行数值。这个变量支持动态改变
tmp_table_size = 16M
# 阿里云值为2M
# 移动云值为16M=16777216
# MySQL的heap(堆积)表缓冲大小。所有联合在一个DML指令内完成,并且大多数联合甚至可以不用临时表即可以完成。
# 大多数临时表是基于内存的(HEAP)表。具有大的记录长度的临时表 (所有列的长度的和)或包含BLOB列的表存储在硬盘上。
# 如果某个内部heap(堆积)表大小超过tmp_table_size,MySQL可以根据需要自动将内存中的heap表改为基于硬盘的MyISAM表。还可以通过设置tmp_table_size选项来增加临时表的大小。也就是说,如果调高该值,MySQL同时将增加heap表的大小,可达到提高联接查询速度的效果
read_buffer_size = 2M
#阿里云值为868352=848K
# 移动云默认256k=262144
# MySQL读入缓冲区大小。对表进行顺序扫描的请求将分配一个读入缓冲区,MySQL会为它分配一段内存缓冲区。read_buffer_size变量控制这一缓冲区的大小。
# 如果对表的顺序扫描请求非常频繁,并且你认为频繁扫描进行得太慢,可以通过增加该变量值以及内存缓冲区大小提高其性能
read_rnd_buffer_size = 8M
# 阿里云值 432k=442368
# 移动云默认512k=524288
# MySQL的随机读缓冲区大小。当按任意顺序读取行时(例如,按照排序顺序),将分配一个随机读缓存区。进行排序查询时,
# MySQL会首先扫描一遍该缓冲,以避免磁盘搜索,提高查询速度,如果需要排序大量数据,可适当调高该值。但MySQL会为每个客户连接发放该缓冲空间,所以应尽量适当设置该值,以避免内存开销过大
sort_buffer_size = 8M
# 阿里云值为868352=848K
# 移动云默认256k=262144
# MySQL执行排序使用的缓冲大小。如果想要增加ORDER BY的速度,首先看是否可以让MySQL使用索引而不是额外的排序阶段。
# 如果不能,可以尝试增加sort_buffer_size变量的大小
join_buffer_size = 8M
# 阿里云值 432k=442368
# 移动云默认256k=262144
# 联合查询操作所能使用的缓冲区大小,和sort_buffer_size一样,该参数对应的分配内存也是每连接独享
thread_cache_size = 8
# 阿里值默认为100
# 移动云默认为100
# 这个值(默认8)表示可以重新利用保存在缓存中线程的数量,当断开连接时如果缓存中还有空间,那么客户端的线程将被放到缓存中,
# 如果线程重新被请求,那么请求将从缓存中读取,如果缓存中是空的或者是新的请求,那么这个线程将被重新创建,如果有很多新的线程,
# 增加这个值可以改善系统性能.通过比较Connections和Threads_created状态的变量,可以看到这个变量的作用。(–>表示要调整的值)
# 根据物理内存设置规则如下:
# 1G —> 8
# 2G —> 16
# 3G —> 32
# 大于3G —> 64
#have_query_cache = NO
#阿里云不支持查询缓存,因为后端任意表更新都将导致缓存失效,不建议使用且msyql8已废弃该功能。
#移动云支持查询缓存
key_buffer_size = 4M
# 阿里云值为16M=16777216
# 移动云默认16M=16777216
# 指定用于索引的缓冲区大小,增加它可得到更好处理的索引(对所有读和多重写),到你能负担得起那样多。如果你使它太大,
# 系统将开始换页并且真的变慢了。对于内存在4GB左右的服务器该参数可设置为384M或512M。通过检查状态值Key_read_requests和Key_reads,
# 可以知道key_buffer_size设置是否合理。比例key_reads/key_read_requests应该尽可能的低,
# 至少是1:100,1:1000更好(上述状态值可以使用SHOW STATUS LIKE 'key_read%'获得)。注意:该参数值设置的过大反而会是服务器整体效率降低
ft_min_word_len = 4
ft_max_word_len = 84
# 两个分词长度均取值于阿里云
# 分词词汇最小长度,默认4
transaction_isolation = READ-COMMITTED
# MySQL支持4种事务隔离级别,他们分别是:# READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE.
# 如没有指定,MySQL默认采用的是REPEATABLE-READ,ORACLE默认的是READ-COMMITTED
# 可重复读的场景一般用于对账等。
# 阿里云默认读已提交,移动云默认可重复读,一般义务建议设置配读已提交。
server_id=186
gtid_mode=ON
enforce_gtid_consistency=ON
binlog_checksum=NONE
log_bin = mysql-bin
binlog_format = row
expire_logs_days = 30 #超过30天的binlog删除
log_error = /data/mysql/mysql-error.log
#错误日志路径
slow_query_log = 1
long_query_time = 1
#慢查询时间 超过1秒则为慢查询
#log_queries_not_using_indexes=1
#是否记录所有未使用索引的语句于慢日志中,谨慎使用
slow_query_log_file = /data/mysql/mysql-slow.log
performance_schema = 0
#explicit_defaults_for_timestamp
#lower_case_table_names = 1
#该参数只能在初始化指定。表名不区分大小写,谨慎使用。
#sql_mode = ONLY_FULL_GROUP_BY,STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
#该参数只能在初始化时指定,后续无法更改。限制sql的语法严格性。建议使用。
skip-external-locking #MySQL选项以避免外部锁定。该选项默认开启
default-storage-engine = InnoDB #默认存储引擎
innodb_file_per_table = 1
# InnoDB为独立表空间模式,每个数据库的每个表都会生成一个数据空间
# 独立表空间优点:
# 1.每个表都有自已独立的表空间。
# 2.每个表的数据和索引都会存在自已的表空间中。
# 3.可以实现单表在不同的数据库中移动。
# 4.空间可以回收(除drop table操作处,表空不能自已回收)
# 缺点:
# 单表增加过大,如超过100G
# 结论:
# 共享表空间在Insert操作上少有优势。其它都没独立表空间表现好。当启用独立表空间时,请合理调整:innodb_open_files
innodb_open_files = 500
# 阿里云 3000
# 移动云 300
# 限制Innodb能打开的表的数据,如果库里的表特别多的情况,请增加这个。这个值默认是300
innodb_buffer_pool_size = 48G
# InnoDB使用一个缓冲池来保存索引和原始数据, 不像MyISAM.
# 这里你设置越大,你在存取表里面数据时所需要的磁盘I/O越少.
# 在一个独立使用的数据库服务器上,你可以设置这个变量到服务器物理内存大小的80%
innodb_write_io_threads = 4
innodb_read_io_threads = 4
# innodb使用后台线程处理数据页上的读写 I/O(输入输出)请求,根据你的 CPU 核数来更改,默认是4
# 注:这两个参数不支持动态改变,需要把该参数加入到my.cnf里,修改完后重启MySQL服务,允许值的范围从 1-64
innodb_thread_concurrency = 0
# 默认设置为 0,表示不限制并发数,这里推荐设置为0,更好去发挥CPU多核处理能力,提高并发量
innodb_purge_threads = 1
# 阿里云 1
# 移动云 4
# InnoDB中的清除操作是一类定期回收无用数据的操作。在之前的几个版本中,清除操作是主线程的一部分,这意味着运行时它可能会堵塞其它的数据库操作。
# 从MySQL5.5.X版本开始,该操作运行于独立的线程中,并支持更多的并发数。用户可通过设置innodb_purge_threads配置参数来选择清除操作是否使用单
# 独线程,默认情况下参数设置为0(不使用单独线程),设置为 1 时表示使用单独的清除线程。建议为1
innodb_flush_log_at_trx_commit = 2
# 阿里云 2
# 移动云 1
# 0:如果innodb_flush_log_at_trx_commit的值为0,log buffer每秒就会被刷写日志文件到磁盘,提交事务的时候不做任何操作(执行是由mysql的master thread线程来执行的。
# 主线程中每秒会将重做日志缓冲写入磁盘的重做日志文件(REDO LOG)中。不论事务是否已经提交)默认的日志文件是ib_logfile0,ib_logfile1
# 1:当设为默认值1的时候,每次提交事务的时候,都会将log buffer刷写到日志。
# 2:如果设为2,每次提交事务都会写日志,但并不会执行刷的操作。每秒定时会刷到日志文件。要注意的是,并不能保证100%每秒一定都会刷到磁盘,这要取决于进程的调度。
# 每次事务提交的时候将数据写入事务日志,而这里的写入仅是调用了文件系统的写入操作,而文件系统是有 缓存的,所以这个写入并不能保证数据已经写入到物理磁盘
# 默认值1是为了保证完整的ACID。当然,你可以将这个配置项设为1以外的值来换取更高的性能,但是在系统崩溃的时候,你将会丢失1秒的数据。
# 设为0的话,mysqld进程崩溃的时候,就会丢失最后1秒的事务。设为2,只有在操作系统崩溃或者断电的时候才会丢失最后1秒的数据。InnoDB在做恢复的时候会忽略这个值。
# 总结
# 设为1当然是最安全的,但性能页是最差的(相对其他两个参数而言,但不是不能接受)。如果对数据一致性和完整性要求不高,完全可以设为2,如果只最求性能,例如高并发写的日志服务器,设为0来获得更高性能
innodb_log_buffer_size = 8M
# 阿里云值为 8388608=8M
# 移动云为 16777216=16M
# 此参数确定些日志文件所用的内存大小,以M为单位。缓冲区更大能提高性能,但意外的故障将会丢失数据。MySQL开发人员建议设置为1-8M之间
innodb_log_file_size = 4294967296
# 阿里云值为4G
# 移动云1000M
# 此参数确定数据日志文件的大小,更大的设置可以提高性能,但也会增加恢复故障数据库所需的时间
innodb_log_files_in_group = 3
# 阿里云 2
# 移动云 4
# 为提高性能,MySQL可以以循环方式将日志文件写到多个文件。推荐设置为3
innodb_max_dirty_pages_pct = 75
# 阿里云 75
# 移动云 75
# innodb主线程刷新缓存池中的数据,使脏数据比例小于90%
innodb_lock_wait_timeout = 50
# InnoDB事务在被回滚之前可以等待一个锁定的超时秒数。InnoDB在它自己的锁定表中自动检测事务死锁并且回滚事务。InnoDB用LOCK TABLES语句注意到锁定设置。默认值是50秒
# 服务器关闭交互式连接前等待活动的秒数。交互式客户端定义为在mysql_real_connect()中使用CLIENT_INTERACTIVE选项的客户端。默认值:28800秒(8小时)
wait_timeout = 28800
# 阿里云值默认为86400
# 服务器关闭非交互连接之前等待活动的秒数。在线程启动时,根据全局wait_timeout值或全局interactive_timeout值初始化会话wait_timeout值,
# 取决于客户端类型(由mysql_real_connect()的连接选项CLIENT_INTERACTIVE定义)。参数默认值:28800秒(8小时)
# MySQL服务器所支持的最大连接数是有上限的,因为每个连接的建立都会消耗内存,因此我们希望客户端在连接到MySQL Server处理完相应的操作后,
# 应该断开连接并释放占用的内存。如果你的MySQL Server有大量的闲置连接,他们不仅会白白消耗内存,而且如果连接一直在累加而不断开,
# 最终肯定会达到MySQL Server的连接上限数,这会报'too many connections'的错误。对于wait_timeout的值设定,应该根据系统的运行情况来判断。
# 在系统运行一段时间后,可以通过show processlist命令查看当前系统的连接状态,如果发现有大量的sleep状态的连接进程,则说明该参数设置的过大,
# 可以进行适当的调整小些。要同时设置interactive_timeout和wait_timeout才会生效。
innodb_io_capacity =
# 该参数很重要,实际值应有最大IOPS的50%到70%,该款实例阿里默认值为2000.该参数影响到数据库的刷盘逻辑。默认值通常过低,导致系统偶尔卡顿。
innodb_io_capacity_max
# 该参数很重要,该款实例阿里默认值为4000.实际测量方法为
# fio -filename=$filename -direct=1 -iodepth 1 -thread -rw=randrw -ioengine=psync -bs=16k -size=500M -numjobs=10 -runtime=10 -group_reporting -name=mytest
# 实测 阿里云增强型云盘实例为2000,阿里云ESSD盘可到4000,曙光云ssd实例为12000,华为云一般实例为1030.
[mysqldump]
quick
max_allowed_packet = 1073741824
# 阿里云默认为1G=1073741824
#服务器发送和接受的最大包长度
浙公网安备 33010602011771号