MySQL5.7的参数优化
1 [client] 2 port = 3306 3 socket = /var/lib/mysql/mysql.sock 4 5 [mysqld] 6 port = 3306 7 socket = /var/lib/mysql/mysql.sock 8 basedir = /usr/mysql/5.7 9 datadir = /data/mysql5.7 10 pid_file = /var/lib/mysql/mysql.pid 11 user = mysql 12 ################################################# 13 #------------------GTID主从---------------------# 14 15 server-id = 209 16 gtid_mode = ON 17 enforce_gtid_consistency = ON 18 #强制gtid一致性,开启后对于特定create table不被支持 19 20 log_slave_updates = ON 21 #从库开启binlog记录执行过的GTID,5.6必须开启,5.7版本后非必须,影响从库IO性能 22 23 slave_parallel_workers = 4 24 #开启基于库的多线程复制默认0不开启 25 26 27 ################################################# 28 #------------------binlog-----------------------# 29 log_bin = mysql3306-binlog 30 31 binlog_format = ROW 32 expire_logs_days = 15 33 binlog_checksum = NONE 34 #二进制日志格式,OLTP为row,DSS系统为mixed,如不确定,使用row 35 #保留15天=内的binlog历史日志 36 #禁用二进制日志时间校验和 37 38 sync_binlog = 1 39 #控制binlog_cache中的所有binlog什么时候刷新进磁盘,1最安全,每一次事务提交均写;0最不安全,由文件系统自行控制;N表示每N次事务后刷新进磁盘,如果IO压力大可以设置为500或1000 40 41 binlog_row_image = full 42 #full(默认),记录所有前镜像(修改前)、后镜像(修改后)的内容,最安全; 43 #MINIMAL前镜像只记录唯一识别列(唯一索引列、主键列),后镜像只记录修改列。 44 45 #max_binlog_cache_size = 100M 46 #max_binlog_size = 500M 47 #binlog_cache_size = 8M 48 49 ################################################# 50 #--------------------log------------------------# 51 innodb-print-all-deadlocks = true 52 log-error = /usr/mysql/5.7/mysql-error.log 53 #开启死锁日志计入到error_log中 54 #设置错误日志 55 56 slow_query_log = on 57 slow_query_log_file = /usr/mysql/5.7/mysql-slow.log 58 #开启慢日志 59 60 long_query_time = 1 61 log_queries_not_using_indexes = 1 62 log-output = FILE 63 #记录超过1s的慢查询 64 #记录没有索引的查询 65 #指定慢查询日志的输出方式,日志文件(FILE),数据库表(TABLE,mysql.slow_log) 66 67 log-slow-admin-statements = 1 68 #记录执行缓慢的管理SQL,如alter table,analyze table, check table, create index, drop index, optimize table, repair table等 69 70 #log_slow_filter 71 #指定超过阈值的查询类型计入慢日志,如full_scan,filesort等 72 73 #log_slow_verbosity 74 #设置慢查询日志中,需要增加的额外信息,可选值query_plan 75 76 ################################################# 77 #-------------------global variables------------# 78 79 sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION 80 #5.7后的兼容配置 81 82 master_info_repository = TABLE 83 #复制元数据存储在系统表 84 85 relay_log_info_repository = TABLE 86 #relay_log中继日志信息写入到表,避免因relay.info更新不及时导致主从复制出错 87 88 autocommit = OFF 89 90 ##Skip Options 91 skip-name-resolve 92 skip_external_locking 93 skip-symbolic-links 94 #开启域名解析 95 #跳过外部锁定,当多台数据库使用同一数据库目录时需要注释掉该项 96 #不对表使用软连接 97 98 max_connections = 3000 99 max_connect_errors = 20000 100 #最大连接数 101 #MySQL同一IP网络连接错误最大值,到达该值时将禁止连接,可防止SYN泛滥攻击 102 103 104 wait_timeout = 172800 105 #非交互式连接(jdbc等)空闲连接最大等待时间 106 interactive_timeout = 172800 107 #交互式(mysql客户端)空闲时长,注意variable出来的是基于这个参数的,因此实际wait_timeout是需要看配置文件确定的 108 109 net_read_timeout = 3600 110 net_write_timeout = 3600 111 net_buffer_length = 16384 112 #数据读取超时时间 113 #数据库写超时时间 114 #mysqldump时提高insert效率,默认1M,最大16M,数据量大时可减少insert次数提高效率 115 116 table_open_cache = 1024 117 table_definition_cache = 1024 118 #指定表高速缓存的大小 119 #表定义文件.frm缓存大小,最大2000 120 121 122 thread_stack = 192K 123 thread_cache_size = 200 124 #每个连接线程被创建时,MySQL给它分配的内存大小 125 #线程池缓存大小(当客户端断开连接后 将当前线程缓存起来 当在接到新的连接请求时快速响应 无需创建新的线程)优化参照2G —> 16;3G —> 32;>3G —> 64,一般不超过200 126 127 128 open_files_limit = 65535 129 #mysqld进程能使用的最大文件描述符数量 130 131 132 ##Default Settings 133 default-time-zone = system 134 default-storage-engine = InnoDB 135 explicit_defaults_for_timestamp = 1 136 lower_case_table_names = 1 137 138 character-set-server = utf8 139 #服务器安装时指定的默认编码格式,这个变量建议由系统自己管理,不要人为定义 140 collation-server = utf8_general_ci 141 #指定默认字符集 142 143 144 performance_schema = 1 145 #收集数据库服务器性能参数 146 147 memlock = true 148 #锁定内存,不使用swap空间 149 150 #transaction-isolation = READ-COMMITTED 151 #设置事务隔离级别,READ-COMMITTED:读已提交 REPEATABLE-READ:可重复读 152 153 #large-pages 154 #支持大页内存模式,内存压力大时考虑开启,否则不建议设置 155 156 event_scheduler = OFF 157 #关闭定时调度器 158 159 query_cache_type = 0 160 query_cache_size = 0 161 query_cache_limit = 0 162 query_cache_min_res_unit = 0 163 #关闭查询缓存 164 165 166 ######################################### 167 #----------------MGR--------------------# 168 169 #transaction_write_set_extraction = XXHASH64 170 #在server收集写集合的同时将其记录到二进制日志。写集合基于每行的主键,并且是行更改后的唯一标识此标识将用于分布式冲突检测和处理。 171 172 #loose-group_replication_group_name = 'ce9be252-2b71-11e6-b8f4-00212844f856' 173 #组的名字必须是有效的UUID,但不能用主机的GTID!所有节点的这个组名必须保持一致!在二进制日志中为组复制事件设置GTID时,将在内部使用此UUID。可使用SELECT UUID()生成一个UUID。 174 175 #loose-group_replication_start_on_boot = off 176 #表示组复制是否随实例启动而启动 177 178 #loose-group_replication_local_address = '192.168.x.x:33061' 179 #不同节点配置本身的IP地址和端口,负责组内通信,需区分MYSQL自身的3306端口 180 181 #loose-group_replication_group_seeds ='192.168.157.128:33061,192.168.157.129:33061,192.168.157.130:33061' 182 #设置组成员的主机名和端口 183 184 #loose-group_replication_bootstrap_group = off 185 #只用于集群初始化的时候设置ON开启,主节点必须执行,其他节点不需要执行 186 187 #loose-group_replication_single_primary_mode = on 188 #单主模式为ON,多主模式为OFF 189 190 #loose-group_replication_enforce_update_everywhere_checks = off 191 #是否在所有节点启用多主数据更新的严格一致性检查 192 #loose-group_replication_ip_whitelist ='192.168.x.0/24' 193 #设置IP白名单 194 195 196 ######################################## 197 #--------------------innoDB------------# 198 199 innodb_status_file = 1 200 #启用InnoDB的status_file 201 innodb_autoinc_lock_mode = 2 202 #不设auto_inc锁,在binlog_format是raw | mixed时,2在性能最好的同时主从复制也是安全的 203 204 innodb_strict_mode = true 205 #InnoDB严格检查模式,当语句写法错误时,无警告信息,直接报错 206 207 innodb_flush_log_at_trx_commit = 1 208 #1:每次事务提交时都会把log buffer的数据写入log file,并且flush(刷到磁盘)中去,该模式为系统默认(最安全)。 209 #2:每次事务提交时都会把log buffer的数据写入log file,但是flush(刷到磁盘)操作并不会同时进行。该模式下,MySQL会每秒执行一次 flush(刷到磁盘)操作,(速度快些,较安全)。只有在操作系统崩溃或者系统断电的情况下,上一秒钟所有事务数据才可能丢失。IO无法满足时考虑设置为2。 210 #0:log buffer将每秒一次地写入log file中,并且log file的flush(刷到磁盘)操作同时进行。该模式下在事务提交的时候,不会主动触发写入磁盘的操作,(不安全,但速度最快)。 211 212 innodb_flush_neighbors = 1 213 #默认值为1,SSD设置为0,Neighbors指的是属于一个extent的所有页面,一个extent共64个页面,出于硬盘IO顺序写的考虑,InnoDB通常会刷新一个extent中的所有页面,因为SSD在随机IO上没有额外负载,所以不需要启用该特性 214 215 innodb_page_size = 16K 216 #虽然SSD建议设置为4KB,确实会提高性能,但会出现索引不能超过768的错误,建议保持默认16KB 217 218 innodb_read_io_threads = 4 219 innodb_write_io_threads = 4 220 #io读写线程的个数,可根据cpu*核心数调整,默认是4 221 222 innodb_io_capacity = 200 223 innodb_io_capacity_max = 2000 224 #InnoDB后台进程最大的IO性能指标,根据服务器IOPS性能调整(建议使用Oracle ORION进行测试),200代表每次可以执行200次IOPS 225 #sas/sata:200 sas*12 raid10:2000 普通ssd:5000-200000 fusion-io高性能ssd:50000-80000 226 227 innodb_buffer_pool_size = 2048M 228 innodb-buffer-pool-instances = 1 229 #60%-75%物理内存 230 #开启内存缓冲池的个数,当buffer_pool大时,该值小表现更好 231 232 innodb_change_buffer_max_size = 25 233 #InnoDB使用Change buffering以最小化随机IO,默认为25,最大值是50,代表buffer pool大小的25%,写多读少的业务,才需要调大这个值。 234 235 innodb_lock_wait_timeout = 300 236 #innodb事务锁超时时间 237 238 innodb_log_buffer_size = 16M 239 240 innodb_log_file_size = 512M 241 #ib_logfile的大小 调优:https://blog.csdn.net/liyanqiang19/article/details/93737632 242 243 innodb_log_files_in_group = 3 244 #ib_logfile的个数,3-5(默认2),视生成的日志量而定 245 246 innodb-file-per-table = true 247 #开启独立表空间,每个数据库的每个表都会生成一个独立的数据空间,.frm文件。 248 249 innodb_use_native_aio = 1 250 #开启后利用linux异步I/O在一定程度上提高系统的并发能力 251 252 innodb_adaptive_flushing = 1 253 innodb_purge_threads = 1 254 innodb_change_buffering = ALL 255 innodb_max_dirty_pages_pct = 85 256 innodb_support_xa = 1 257 innodb_rollback_on_timeout 258 259 innodb_fast_shutdown = 0 260 #0,保障数据的完整性,会做清除脏页和插入缓冲区的合并操作,也会将脏页全部刷新到磁盘上面去,但是这个时候关闭的速度是最慢的 261 #1,关闭MySQL的时候不会做清除脏页和插入缓冲区的合并操作,也不会将脏页刷新到磁盘 262 #2,不会做清除脏页和插入缓冲区的合并操作,也不会将脏页刷新到磁盘,但是会刷新到redo log里面,再下次启动mysql的时候恢复 263 264 265 #innodb_rollback_on_timeout = true 266 #事务中超时报错回滚开启,需结合事务隔离级别,注意RR+TRUE的时候事务超时前的sql也会回滚,其他组合不会。具体参照https://www.cnblogs.com/gjc592/p/12084729.html, 267 268 #innodb-status-file = TRUE 269 #InnoDB标准监控输出文件 270 271 #innodb_thread_concurrency = 16 272 #INNODB存储引擎中允许的最大的线程并发数,优化建议http://blog.itpub.net/15498/viewspace-2141352/ 273 274 #innodb_data_home_dir = /data/mysql/data 275 #innodb_data_file_path = ibdata1:2000M;ibdata2:10M:autoextend 276 #(专用data磁盘文件系统路径,存储系统表空间,建议不要明确设置,如需设置,ibdata1的大小需要和实际大小相同) 277 278 #innodb_flush_method = O_DIRECT 279 #(如果不使用硬件RAID控制器或者使用SAN,则不用设置) 280 281 #innodb_log_group_home_dir = /usr/mysql/5.7/redo 282 #专用redo磁盘文件系统路径 283 284 #innodb-sort-buffer-size = 1M 285 #此选项为创建索引时使用,创建完释放,一般不用设置,默认1M 286 287 ###################################### 288 #------------session variables-------# 289 290 max_heap_table_size = 512M 291 #MEMORY内存引擎的表大小 292 tmp_table_size = 512M 293 #sql执行时生成临时数据表的内存缓存大小,受max_heap_table_size影响限制,需同时调整 294 295 sort_buffer_size = 2M 296 read_buffer_size = 8M 297 read_rnd_buffer_size = 8M 298 join_buffer_size = 8M 299 bulk_insert_buffer_size = 64M 300 #sort缓存设置 301 #read缓存设置 302 #在使用行指针排序之后,随机读用的缓存 303 #使用join时的缓存设置 304 #数据量大时优化插入提速 305 306 307 308 ######################################## 309 #---------------replicate--------------# 310 relay-log = /usr/mysql/5.7/mysql-relay-bin 311 relay-log-index = relay3306.index 312 log-slave-updates 313 314 #MyISAM 315 key_buffer_size = 64M 316 myisam_sort_buffer_size = 32M 317 myisam_max_sort_file_size = 2G 318 myisam_repair_threads = 1 319 myisam-recover-options = 1 320 321 [mysqlhotcopy] 322 interactive-timeout 323 324 [mysqld_safe] 325 open-files-limit = 32767 326 #文件描述符 327 innodb_open_files = 32767 328 #限制Innodb能打开的表的数据