旭东的博客

摘要： 1. 背景 最近QA对线上单模块进行压测(非全链路压测)，http客户端 与 thrift服务端的tcp链接总在一段时间被close。 查看服务端日志显示 i/o timeout. 最后的结果是: qps太小, 长时间不发送请求, server主动关闭socket 2. 查看thrift框架原代码 阅读全文

摘要： 动画网址 http://thesecretlivesofdata.com/raft/ 阅读全文

摘要： 1.背景 记录一下，方便后续写代码直接使用。 需要注意几点: chan 默认支持多协程工作，不需要加锁。 其他变量操作需要使用锁保护(map多协程并发写会panic, 并且无法捕获)。 启动goroutine时, 通常需要传递参数。不读取局部变量。 需要使用waitgroup等待所有goroutin 阅读全文

摘要： 背景 最近老代码中遇到的一个问题，表现为： goroutine数量在高峰期上涨，上涨后平峰期将不下来。也就是goroutine泄露 使用pprof看，进程堵塞在chan chan的使用经验 在使用chan时，需要注意堵塞问题 chan做为参数传递时，每个接收方都需要注意chan可能的堵塞(否则cha 阅读全文

摘要： 1. go没有static关键字 面向对象编程中，尽量对函数进行封装，对于没有函数变量的对象，使用static关键字尤其方便。 go中没有static关键字，必须每次new一个出来。 2. go没有while; do...while循环 go语言里面的for循环比较灵活 go func main() 阅读全文

摘要： 1. 背景 go代码中要实现异步很简单，go funcName()。 但是进程需要控制协程数量在合理范围内，对应大批量任务可以使用“协程池 + 无锁队列”实现。 2. golang无锁队列实现思路 Channel是Go中的一个核心类型，你可以把它看成一个管道，通过它并发核心单元就可以发送或者接收数据 阅读全文

摘要： 1. go web编程入门 记录个web编程例子方便以后使用。 主要有: chan的使用(带缓存，不带缓存) client发起get/post请求 server解析get/post请求参数 http.HandleFunc 根据请求uri设置对应处理func 2. server.go, 参数解析返回 阅读全文

摘要： 1. 背景 之前听到同事说，要为自己的模块考虑写个数据协议。今天有空想了一下。写出来，方便后续使用。 中可以支持多种协议，nshead、redis、mongo等20多种协议。 2. 什么是数据交互协议？ 这里说的协议，不是tcp/ip这些网络协议。 在分布式环境中，我们需要将模块的数据通过网络bit 阅读全文

摘要： 1. 背景 昨天看到一段brpc中的压测代码rpc_press, 看着不错。整理一下。 发压工具的难点不是发送请求，而是要注意下面的2点: 保证能发出 ，比如上万qps ，比如控制为5qps，不可以大量发压 2. brpc 中的是关键实现 2.1 如何确保发送足够qps rpc_press 采用多线 阅读全文

摘要： 1. 背景 最近在看redis源码，主体流程看完了。 在网上看到了reactor模式，看了一下，其实我们经常使用这种模式。 2. 什么是reactor模式 反应器设计模式(Reactor pattern)是一种为处理并发服务请求，并将请求提交到一个或者多个服务处理程序的事件设计模式。 当客户端请求抵 阅读全文