上一页 1 ··· 120 121 122 123 124 125 126 127 128 ··· 234 下一页

2019年7月29日

用 Python 写一个多进程兼容的 TimedRotatingFileHandler

摘要: 我前面有篇文章已经详细介绍了一下 Python 的日志模块。Python 提供了非常多的可以运用在各种不同场景的 Log Handler. TimedRotatingFileHandler 是 Python 提供的一个可以基于时间自动切分日志的 Handler 类,他继承自 BaseRotating 阅读全文

posted @ 2019-07-29 18:28 ExplorerMan 阅读(727) 评论(0) 推荐(0)

redis集群主从中断,报io过高 不错

摘要: 问题原因:1、由于这个集群redis操作非常频繁,1分钟操作数据达到1-2G,所有自动aof非常频繁,主从复制打包rdb也非常频繁,之前配置已经无法满足要求报异常如下6943:M 19 Jul 20:22:57.326 # Connection with slave 10.215.84.40:600 阅读全文

posted @ 2019-07-29 16:49 ExplorerMan 阅读(716) 评论(0) 推荐(0)

redis aof文件过大问题

摘要: 最近新安装了一台redis,版本为redis-3.2.5 数据盘用的是固态硬盘。 之前用的是普通硬盘,redis日志天天报 Asynchronous AOF fsync is taking too long (disk is busy?). Writing the AOF buffer withou 阅读全文

posted @ 2019-07-29 16:32 ExplorerMan 阅读(4662) 评论(0) 推荐(0)

优化 | Redis AOF重写导致的内存问题 不错

摘要: 一、问题说明 业务上接到报警提示服务器内存爆了,登录查看发现机器剩余内存还很多,怀疑是被OOM了,查看/var/log/messages: 发现redis-server被oom kill了,但是登录查看发现redis-server并没有down掉. 二、问题排查 既然redis-server并没有被 阅读全文

posted @ 2019-07-29 15:32 ExplorerMan 阅读(1602) 评论(0) 推荐(0)

2019年7月25日

postgresql集群的搭建

摘要: 目录 架构图 部署详情 postgresql的安装与配置 pgpool的安装与配置 写在安装前 postgresql是一款很强大的数据库,具体有多强大呢,请谷歌。。。 网上的相关资料不是很多,参考了大神们的文档,结合自己趟了的坑,写了pg集群的安装文档。可能有一些参数没有配置好,希望大神们指出,谢谢 阅读全文

posted @ 2019-07-25 21:37 ExplorerMan 阅读(31987) 评论(0) 推荐(2)

谈谈高并发系统的限流

摘要: 开涛大神在博客中说过:在开发高并发系统时有三把利器用来保护系统:缓存、降级和限流。本文结合作者的一些经验介绍限流的相关概念、算法和常规的实现方式。 缓存 缓存比较好理解,在大型高并发系统中,如果没有缓存数据库将分分钟被爆,系统也会瞬间瘫痪。使用缓存不单单能够提升系统访问速度、提高并发访问量,也是保护 阅读全文

posted @ 2019-07-25 21:30 ExplorerMan 阅读(413) 评论(0) 推荐(0)

架构设计之「服务限流」

摘要: 限流可以认为服务降级的一种,限流就是限制系统的输入和输出流量已达到保护系统的目的。一般来说系统的吞吐量是可以被测算的,为了保证系统的稳定运行,一旦达到的需要限制的阈值,就需要限制流量并采取一些措施以完成限制流量的目的。比如:延迟处理,拒绝处理,或者部分拒绝处理等等。 在介绍限流概念之前,我们先来聊聊 阅读全文

posted @ 2019-07-25 21:29 ExplorerMan 阅读(203) 评论(0) 推荐(0)

万亿级数据洪峰下的分布式消息引擎

摘要: 前言 通过简单回顾阿里中间件(Aliware)消息引擎的发展史,本文开篇于双11消息引擎面临的低延迟挑战,通过经典的应用场景阐述可能会面临的问题 - 响应慢,雪崩,用户体验差,继而交易下跌。为了应对这些不可控的洪峰数据,中间件团队通过大量研究和实践,推出了低延迟高可用解决方案,在分布式存储领域具有一 阅读全文

posted @ 2019-07-25 21:23 ExplorerMan 阅读(355) 评论(0) 推荐(0)

mysql 如何给大表添加字段

摘要: 当需要对表进行ddl操作如加索引、增删列时,数据量小时直接在线修改表结构影响不大当表达到百万、千万数据就不能直接在线修改表结构 下面是具体的过程:1、备份数据select * from ih_order into outfile '/bak/order.txt';mysql> select * fr 阅读全文

posted @ 2019-07-25 21:21 ExplorerMan 阅读(1117) 评论(0) 推荐(0)

Mysql新增字段到大数据表导致锁表

摘要: 昨天晚上7点左右,对一张表进行加字段,大概200多万条记录,字段90多个的大表,结果造成mysql锁表,进而导致服务不可用。执行语句如下: [sql] view plain copy ALTER TABLE `sc_stockout_order` ADD `route_remarks` VARCHA 阅读全文

posted @ 2019-07-25 21:05 ExplorerMan 阅读(4228) 评论(0) 推荐(0)

上一页 1 ··· 120 121 122 123 124 125 126 127 128 ··· 234 下一页

导航