Redis开发规范

Posted on 2020-09-22 18:52  Alen_hope  阅读(184)  评论(0)    收藏  举报

1:使用规范

1.1:冷热数据区分

虽然 Redis支持持久化,但将所有数据存储在 Redis 中,成本非常昂贵。建议将热数据 (QPS超过 5k) 的数据加载到 Redis 中。低频数据可存储在 MysqlElasticSearch中。

1.2:业务数据分离

不要将不相关的业务数据存在一个redis中,

①避免业务互相影响。降低故障影响,快速恢复

②避免单实例的数据膨胀

1.3:缓存不能有中间态

即去除缓存后逻辑不应发生改变,不可切入到业务中。

 

2:键值设计

2.1key名设计

2.1.1:可读、可管理、简介

以业务名 (或数据库名) 为前缀 (防止 key 冲突),用冒号分隔。

例: schedule:driver:id即调度系统的Id**的司机。

2.1.2:简洁

保证语义的前提下,控制 key 的长度,当 key 较多时,内存占用也不容忽视。

2.1.3:【强制】key值不可包含特殊字符

反例:包含空格、换行、单双引号以及其他转义字符。

2.2value设计

2.2.1:【强制】拒绝bigkey(防止网卡流量、慢查询)

string 类型控制在 10KB 以内,hashlistsetzset 元素个数不要超过 5000

List的最大长度不超过1Wsize不超过1G

2.2.2:【重要】选择合适的数据结构

例如:实体类型(要合理控制和使用数据结构内存编码优化配置,例如ziplist,但也要注意节省内存和性能之间的平衡)

反例:
set user:1:name tom
set user:1:age 19
set user:1:favor football

正例:
hmset user:1 name tom age 19 favor football

2.2.3:【重要】生命周期控制

建议使用expire设置过期时间(条件允许可以打散过期时间,防止集中过期),不过期的数据重点关注idletime
作为缓存使用的 Key,必须要设置失效时间。失效时间并不是越长越好,请根据业务性质进行设置。注意,失效时间的单位有的是秒,有的是毫秒

 

3:操作规范

3.1:【推荐】O(N)命令关注N的数量

例如hgetalllrangesmemberszrangesinter等并非不能使用,但是需要明确N的值。有遍历的需求可以使用hscansscanzscan代替。

3.2:【强制】禁用命令

禁止线上使用keysflushallflushdb等,通过redisrename机制禁掉命令,或者使用scan的方式渐进式处理。

例:keys命令用于查找所有符合给定模式 pattern key,时间复杂度为O(N)N 为数据库中 key 的数量。当数据库中的个数达到千万时,这个命令会造成读写线程阻塞数秒。

3.3:【推荐】合理使用 select

redis 的多数据库较弱,使用数字进行区分,很多客户端支持较差,同时多业务用多数据库实际还是单线程处理,会有干扰。

3.4:【强制】使用批量操作提高效率

3.4.1:严禁使用的批量操作

1)[zset] 严禁对 zset 的不设范围操作

2)ZRANGE、 ZRANGEBYSCORE等多个操作 ZSET 的函数,严禁使用 ZRANGE myzset 0 -1 等这种不设置范围的操作。请指定范围,如 ZRANGE myzset 0 100。如不确定长度,可使用 ZCARD 判断长度

3)[hash] 严禁对大数据量 Key 使用 HGETALL

4)HGETALL会取出相关 HASH 的所有数据,如果数据条数过大,同样会引起阻塞,请确保业务可控。如不确定长度,可使用 HLEN 先判断长度

5)[key] Redis Cluster 集群的 mget 操作,会到各分片取数据聚合,相比传统的 M/S架构,性能会下降很多,请提前压测和评估

6)[其他] 严禁使用 sunion, sinter, sdiff等一些聚合操作

3.4.2:推荐使用批量操作

原生命令:例如mgetmset

非原生命令:可以使用pipeline提高效率。

但要注意控制一次批量操作的元素个数(例如500以内,实际也和元素字节数有关)

注意两者不同:

1.原生是原子操作,pipeline是非原子操作。

2.pipeline可以打包不同的命令,原生做不到。

3.pipeline需要客户端和服务端同时支持。

3.5:【推荐】redis事务能力较弱,不建议使用

Redis的事务功能较弱(不支持回滚),而且集群版本(自研和官方)要求一次事务操作的key必须在一个slot(可以使用hashtag功能解决)

3.6:【推荐】不使用多个db

默认使用db0,如果需要切分业务线,在配置文件中定义各业务线使用的前缀。通过key来区分业务类型。