摘要: 近期在生产库遇到分布式事务异常,导致涉及的对象被锁住,业务无法正常操作该对象,引发故障 具体日志信息: Sat Dec 28 11:15:27 2019 Error 2050 trapped in 2PC on transaction 191.4.1345608. Cleaning up. Erro 阅读全文
posted @ 2019-12-29 23:56 tonnytangy 阅读(1200) 评论(0) 推荐(0)
摘要: 今晚系统割接,在修改组件配置重启服务后,主机夯住了,操作系统命令无法执行,主机无法正常登录 将组件服务停止后,又恢复正常 查看主机mesg信息,有大量的kernel异常信息 kernel: nf_conntrack: table full, dropping packet 这是iptables的报错 阅读全文
posted @ 2019-12-17 03:05 tonnytangy 阅读(648) 评论(0) 推荐(0)
摘要: 今天写脚本在引用random时,提示 ImportError: cannot import name 'randint' from partially initialized module 'random' (most likely due to a circular import) (G:\pyt 阅读全文
posted @ 2019-12-15 18:03 tonnytangy 阅读(5391) 评论(2) 推荐(0)
摘要: 在排查应用网络瞬断故障的时候,偶然发现主机messege日志中不知道什么时候开始有大量的异常日志 看网上分析主要原因是两方面: 一个是IPv6地址影响,但我们服务器并没有启用并配置IPv6地址 一个是FTP服务会导致该异常,而我们服务器缺失启用vsftp服务,查看相应日志 跟主机kernel的异常日 阅读全文
posted @ 2019-12-03 18:12 tonnytangy 阅读(1801) 评论(0) 推荐(0)
摘要: 系统默认的log_timestamps为UTC,与linux系统时间相差8小时 解决方法: SET GLOBAL log_timestamps = SYSTEM;(立即生效,重启mysql服务,失效) 永久生效方法,在/etc/my.cnf中添加 log_timestamps=system 阅读全文
posted @ 2019-12-01 16:04 tonnytangy 阅读(783) 评论(0) 推荐(0)
摘要: 【问题现象】 在查询多个监控网元性能数据时候,发现都有断点,查看采集程序都正常,而队列中有一个代理的队列突然积压了40多万个指标未处理 【处理过程】 1、查看proxy的日志情况,无任何异常信息反馈 2、查看代理对应的mysql,无异常等待时间 3、查看代理和数据库所在的主机性能,CPU、内存、网络 阅读全文
posted @ 2019-11-20 12:59 tonnytangy 阅读(3574) 评论(0) 推荐(0)
摘要: 尝试一:用zabbix自带的模版net.tcp.listen 直接新建监控项,这种方式是直接去读取/proc/net/tcp,但取不到端口状态 具体源代码(3.0.2版本): 从主机侧查看端口是正常listen 原因是内核会频繁的写/proc/net/tcp这个文件,导致读取不正常 尝试二:通过在本 阅读全文
posted @ 2019-01-24 09:35 tonnytangy 阅读(1093) 评论(0) 推荐(0)
摘要: 出于对infomation_schema虚拟数据库对象权限的不熟悉 在应用提出需要访问innodb_locks数据权限时,想着通过以下方式赋权 原因是information_schema数据库的权限是默认对所有用户开放的 再具体访问数据库里面的表数据时,又有如下报错: 该问题可以通过process权 阅读全文
posted @ 2019-01-17 15:53 tonnytangy 阅读(5694) 评论(0) 推荐(0)
摘要: 今天生产遇到一个dblink用户自由select权限,但能通过for update锁表,感觉很奇怪 网上的大拿给了参考,mark下: 原文:http://blog.itpub.net/4227/viewspace-713128/ 阅读全文
posted @ 2019-01-01 23:07 tonnytangy 阅读(829) 评论(0) 推荐(0)
摘要: 操作系统:linux RHEL 7.4 数据库:Oracle 12c R2 问题现象:生产中某个核心数据库升级至12cR2后,出现一些“class slave wait”等待事件,且发起用户是sys和customer user,program是后台进程,感觉很奇怪 问题原因: 查询MOS得知 阅读全文
posted @ 2019-01-01 11:03 tonnytangy 阅读(2184) 评论(0) 推荐(0)