摘要： msgpack和protobuf的对比 msgpack的序列化速度比protobuf要快一些，但反序列化要比protobuf要慢一些，但总体都接近msgpack可以直接序列化类对象，但protobuf需要先写描述映射文件(.proto)msgpack支持的基本类型比protobuf支持的要全面些pr 阅读全文

摘要： 背景 mongodb 3.4，使用默认的配置（没有调整内存限制或其他性能配置），数据库有90万+条数据 开始实验 以下分别使用 find 查询 和 aggregate 聚合查询 以下为dao层（server/dao/cmsResourceDao.js），基于mongoose查询mongodb get 阅读全文

摘要： 背景 预先创建了一个复合索引，分别以 updated_at 和 size 两个字段作为索引依据，其中该collection有94万+个document db.cms_resources.createIndex({updated_at:-1,size:-1},{name:'index_updated_ 阅读全文

摘要： 一、索引 MongoDB 提供了多样性的索引支持，索引信息被保存在system.indexes 中，且默认总是为_id创建索引，它的索引使用基本和MySQL 等关系型数据库一样。其实可以这样说说，索引是凌驾于数据存储系统之上的另一层系统，所以各种结构迥异的存储都有相同或相似的索引实现及使用接口并不足 阅读全文

摘要： 一致性哈希算法在1997年由麻省理工学院提出的一种分布式哈希（DHT）实现算法，设计目标是为了解决因特网中的热点(Hot spot)问题，初衷和CARP十分类似。一致性哈希修正了CARP使用的简 单哈希算法带来的问题，使得分布式哈希（DHT）可以在P2P环境中真正得到应用。 一致性hash算法提出了 阅读全文

摘要： 一直性Hash算法在很多场景下都有应用，尤其是在分布式缓存系统中，经常用其来进行缓存的访问的负载均衡，比如：redis等<k,v>非关系数据库作为缓存系统。我们首先来看一下采用取模方式进行缓存的问题。 一致性Hash算法的使用场景 假设我们的将10台redis部署为我们的缓存系统，存储<k,v>数据 阅读全文

摘要： 一致性hash算法是分布式中一个常用且好用的分片算法、或者数据库分库分表算法。现在的互联网服务架构中，为避免单点故障、提升处理效率、横向扩展等原因，分布式系统已经成为了居家旅行必备的部署模式，所以也产出了几种数据分片的方法：1.取模，2.划段，3.一致性hash前两种有很大的一个问题就是需要固定的节 阅读全文

摘要： 背景 一个Python项目中要使用kafka去deliver log，1个producer，5个consumer。单条消息的大小是100KB ～ 500KB，producer要在1秒钟之内能够发送30个这样的message。然后每个consumer也要在1秒钟之内消费30个这样的message。另外 阅读全文

摘要： 一、为什么要使用Deadlines# 当我们使用gRPC时，gRPC库关系的是连接，序列化，反序列化和超时执行。Deadlines 允许gRPC客户端设置自己等待多长时间来完成rpc操作，直到出现这个错误 DEADLINE_EXCEEDED。但是在正常情况下，这个DEADLINE_EXCEEDED默 阅读全文

摘要： 分析接口的赋值，反射，断言的实现原理 版本：golang v1.12 interface底层使用2个struct表示的：eface和iface 一：接口类型分为2个# 1. 空接口# Copy //比如 var i interface{} 2. 带方法的接口# Copy //比如 type stud 阅读全文