海东潮 - 博客园

2018年12月10日

摘要： Percona-Toolkits Percona-toolkit 简介 percona-toolkit是一组高级命令行工具的集合，用来执行各种通过手工执行非常复杂和麻烦的mysql任务和系统任务，这些任务包括：检查master和slave数据的一致性有效地对记录进行归档查找重复的索引对服务器阅读全文

posted @ 2018-12-10 14:45 海东潮阅读(467) 评论(0) 推荐(0)

上云三部曲：集团支付平台数据架构最佳实践

摘要：本文根据张小虎老师在2017年12月3日【DBAplus数据库年终盘点大会】现场演讲内容整理而成。点击文末链接即可下载PPT~ 讲师介绍中国电信集团支付平台在2016年做过比较大的动作就是上云操作。通过上云操作，我们完成了公司成立6年来包括上层应用在内的所有硬、软件架构的大梳理与大调整。这项工作的阅读全文

posted @ 2018-12-10 13:26 海东潮阅读(620) 评论(0) 推荐(0)

gh-ost和pt-osc性能对比

摘要： haughty_xiao haughty_xiao haughty_xiao 基于MySQL row格式的复制现在趋于主流，因此可以使用此格式的binlog来跟踪改变而不是触发器。与percona toolkit的pt-online-schema-online相比，gh-ost做法更为干净，更安全。阅读全文

posted @ 2018-12-10 13:08 海东潮阅读(1131) 评论(0) 推荐(0)

MySQL在线DDL gh-ost 使用说明

摘要：原文：gh-ost: GitHub's online schema migration tool for MySQL http://github.com/github/gh-ost MySQL在线更改schema的工具很多，如Percona的pt-online-schema-change、 Face 阅读全文

posted @ 2018-12-10 12:03 海东潮阅读(1955) 评论(0) 推荐(0)

MySQL 8.0新特性之原子DDL

摘要：文章来源：爱可生云数据库简介 MySQL8.0 开始支持原⼦ DDL(atomic DDL)，数据字典的更新，存储引擎操作，写⼆进制日志结合成了一个事务。在没有原⼦DDL之前，DROP TABLE test1,test2；如遇到server crash，可能会有test1被drop了，test2没阅读全文

posted @ 2018-12-10 11:57 海东潮阅读(1025) 评论(2) 推荐(0)

pt-osc全解pt-online-schema-change

摘要： MySQL 大字段的DDL操作：加减字段、索引、修改字段属性等，在5.1之前都是非常耗时耗力的，特别是会对MySQL服务产生影响。在5.1之后随着Plugin Innodb的出现在线加索引的提高了很多，但是还会影响（时间缩短了），主要是出现了MDL锁。不过5.6可以避免上面的情况，但目前大部分在用的阅读全文

posted @ 2018-12-10 11:44 海东潮阅读(508) 评论(0) 推荐(0)

(笔记)MySQL 之 Metadata Locking 研究(5.5版本)

摘要： MySQL5.5 中引入了 metadata lock. 顾名思义，metadata lock 不是为了保护表中的数据的，而是保护 database objects(元数据)的。包括表结构、schema、存储过程、函数、触发器、mysql的调度事件(events). 要理解 metadata loc 阅读全文

posted @ 2018-12-10 11:24 海东潮阅读(229) 评论(0) 推荐(0)

MySQL 一致性读深入研究

摘要：一致性读，又称为快照读。使用的是MVCC机制读取undo中的已经提交的数据。所以它的读取是非阻塞的。相关文档：http://dev.mysql.com/doc/refman/5.6/en/innodb-consistent-read.html A consistent read means tha 阅读全文

posted @ 2018-12-10 11:08 海东潮阅读(1866) 评论(1) 推荐(0)

Operating System Error Codes

摘要： How To Fix Windows Errors Click here follow the steps to fix Windows and related errors. Instructions To Fix (Windows) error you need to follow the st 阅读全文

posted @ 2018-12-10 10:47 海东潮阅读(578) 评论(0) 推荐(0)

5分钟了解MySQL5.7的Online DDL雷区

摘要： Part1:写在最前 Online DDL，当新手听到这个名字的时候，非常高兴，以为无论什么情况下，修改表结构都不会锁表，理想很丰满，现实很骨感！读完本文，教你如何避开这些雷区，安全的修改表结构。话不多说，我们分别来看下MySQL5.6和MySQL5.7在修改表结构上的相同和异同。 Part2:5. 阅读全文

posted @ 2018-12-10 10:21 海东潮阅读(775) 评论(0) 推荐(0)

2018年12月9日

pt-osc原理、限制、及与原生online-ddl比较

摘要： ps-osc https://www.percona.com/doc/percona-toolkit/LATEST/pt-online-schema-change.html 一、MySQL ddl 的问题现状在运维mysql数据库时，我们总会对数据表进行ddl 变更，修改添加字段或者索引，对于mys 阅读全文

posted @ 2018-12-09 23:34 海东潮阅读(1215) 评论(0) 推荐(0)

学习笔记：Rick's RoTs -- Rules of Thumb for MySQL

摘要： Table of Contents SELECTs -- do's and don'tsINDEXingENGINE DifferencesOptimizations, and notPARTITIONingMemory UsageCharacter SetsDatatypes - Directly 阅读全文

posted @ 2018-12-09 19:26 海东潮阅读(262) 评论(0) 推荐(0)

学习笔记：The Best of MySQL Forum

摘要： http://mysql.rjweb.org/bestof.html I have tagged many of the better forum threads. 'Better' is based on how good I thing the answer was. (<bias> I wro 阅读全文

posted @ 2018-12-09 19:24 海东潮阅读(709) 评论(0) 推荐(0)

学习笔记：Analyze MySQL Performance及慢日志的开启

摘要： Table of Contents Analyze MySQL PerformanceTuningSlow queries and Slowlog Table of Contents Brought to you by Rick James Analyze MySQL Performance Whe 阅读全文

posted @ 2018-12-09 19:20 海东潮阅读(498) 评论(0) 推荐(0)

MySQL: Building the best INDEX for a given SELECT

摘要： Table of Contents The ProblemAlgorithmDigressionFirst, some examplesAlgorithm, Step 1 (WHERE "column = const")Algorithm, Step 2Algorithm, Step 2a (one 阅读全文

posted @ 2018-12-09 19:14 海东潮阅读(303) 评论(0) 推荐(0)

学习笔记：ALTERing a Huge MySQL Table - 对一个超大表做alter调整

摘要： Table of Contents The ProblemFuture SolutionsOverview of SolutionShortcutAssumptions/Restrictions/ComplicationsDatabase LayerThe AlterOne Iteration (C 阅读全文

posted @ 2018-12-09 18:46 海东潮阅读(1225) 评论(0) 推荐(0)

Google common_schema 2.2 documentation

摘要： http://shlomi-noach.github.io/common_schema/introduction.html https://github.com/shlomi-noach/common_schema 阅读全文

posted @ 2018-12-09 18:36 海东潮阅读(239) 评论(0) 推荐(0)

学习笔记：MySQL Big DELETEs 删除大量数据

摘要：原文地址：http://mysql.rjweb.org/doc.php/deletebig Table of Contents The ProblemWhy it is a ProblemInnoDB and undoSolutionsPARTITIONDeleting in ChunksInnoD 阅读全文

posted @ 2018-12-09 18:22 海东潮阅读(1732) 评论(0) 推荐(0)

mysql 5.5 数据库 utf8改utf8mb4

摘要：由于需要用到utf8mb4，之前是utf8现在给改成utf8mb4 查看当前环境 SHOW VARIABLES WHERE Variable_name LIKE 'character\_set\_%' OR Variable_name LIKE 'collation%'; + + + | Varia 阅读全文

posted @ 2018-12-09 17:41 海东潮阅读(2247) 评论(0) 推荐(0)

Quick and Easy Installation of Oracle Database 12c on Oracle Linux in Oracle VM VirtualBox

摘要：发贴人 Sergio-Oracle 于2018-4-18 23:10:15在Oracle Linux Introduction How Does This Work? Requirements Before You Get Started Steps Clone the vagrant-boxes 阅读全文

posted @ 2018-12-09 00:21 海东潮阅读(362) 评论(0) 推荐(0)

MySQl新特性 GTID

摘要： GTID简介概念全局事务标识符（GTID）是创建的唯一标识符，并与在源（主）服务器上提交的每个事务相关联。此标识符不但是唯一的，而且在给定复制设置中的所有服务器上都是唯一的。所有交易和所有GTID之间都有一对一的映射关系。GTID由source_id和transaction_id组成 GTID 阅读全文

posted @ 2018-12-09 00:14 海东潮阅读(1193) 评论(0) 推荐(0)

Linux中 /proc/[pid] 目录各文件简析

摘要： Linux 内核提供了一种通过 proc 文件系统，在运行时访问内核内部数据结构、改变内核设置的机制。proc 文件系统是一个伪文件系统，它只存在内存当中，而不占用外存空间。它以文件系统的方式为访问系统内核数据的操作提供接口。用户和应用程序可以通过 proc 得到系统的信息，并可以改变内核的某些参阅读全文

posted @ 2018-12-09 00:10 海东潮阅读(3041) 评论(0) 推荐(1)

proxysql on github

摘要： https://github.com/sysown/proxysql/wiki 阅读全文

posted @ 2018-12-09 00:05 海东潮阅读(170) 评论(0) 推荐(0)

176条DevOps人员常用的linux命令速查表

摘要：线上查询及帮助命令文件和目录操作命令查看文件及内容处理命令文件压缩及解压缩命令信息显示命令搜索文件命令用户管理命令基础网络操作命令深入网络操作命令有关磁盘与文件系统的命令系统权限及用户授权相关命令查看系统用户登陆信息的命令内置命令及其它系统管理与性能监视命令关机 / 重启阅读全文

posted @ 2018-12-09 00:03 海东潮阅读(254) 评论(0) 推荐(0)

2018年12月8日

实战分析: MySQL字符集

摘要：原创：吴炳锡 MySQLBeginner 实战分析: MySQL字符集说明在本文中讨论以下几个问题： 1. GBK和UTF8占用几个字节 2. ASCII码在不同字符集中占用几个字节 3. MySQL中UTF8MB4在存储空间中是不是都是占用4个字节？字符集问题比较枯燥，知数堂MySQL DB 阅读全文

posted @ 2018-12-08 23:35 海东潮阅读(286) 评论(0) 推荐(0)

MySQL: Connection Character Sets and Collations

摘要： character_set_server collation_servercharacter_set_databasecollation_database character_set_clientcharacter_set_results character_set_connection < cha 阅读全文

posted @ 2018-12-08 23:26 海东潮阅读(1187) 评论(0) 推荐(0)

运维安全之Tripwire

摘要：转自网络 Tripwire是最为著名的unix下文件系统完整性检查的软件工具，这一软件采用的技术核心就是对每个要监控的文件产生一个数字签名，保留下来。当文件现在的数字签名与保留的数字签名不一致时，那么现在这个文件必定被改动过了。当Tripwire运行在数据库生成模式时，会根据管理员设置的一个配置阅读全文

posted @ 2018-12-08 22:38 海东潮阅读(296) 评论(0) 推荐(0)

七字诀，不再憋屈的运维

摘要：注：本文来源于网络，版权归原作者所有，用于知识分享，不任何商业用途。前言做运维的那么多，快乐的能有几个？我们那么努力，为什么总感觉过得那么憋屈、苦闷？做的事情那么多，为什么业务部门、直接领导和公司貌似都那么不领情？怎么做才能自己更加开心些？本专栏的主线实际是一个运维人员的十年成长史，从菜鸟到阅读全文

posted @ 2018-12-08 22:36 海东潮阅读(362) 评论(0) 推荐(0)

利用钉钉机器人发送告警信息

摘要：现在越来越多的人开始使用钉钉，对于运维告警来说，除了传统的邮件告警之外，短信告警、企业微信告警、钉钉机器人告警等也是首选考虑。这里介绍如果利用python+钉钉机器人实现告警信息发送。首先新增一个组专门用来接受告警信息，在组设置中看到组机器人Group robot，如下图：点击“组机器人”，进阅读全文

posted @ 2018-12-08 22:25 海东潮阅读(3052) 评论(0) 推荐(1)

MySQL 支持utf8mb4

摘要： utf8mb4 utf8mb3 utf8 Refer to The utf8mb4 Character Set The utf8 Character Set (Alias for utf8mb3) MySQL在 5.5.3 之后增加了 utf8mb4 字符编码，mb4即 most bytes 4。简阅读全文

posted @ 2018-12-08 22:13 海东潮阅读(2323) 评论(0) 推荐(0)

数据库技术和故事

从今以后，愿你无所畏惧。

公告