第五天

内容概要

python操作哨兵
python操作集群
缓存优化

python操作哨兵

高可用架构后--》不能直接连某一个主库了--》主库可能会挂掉，后来他就不是主库了

之前学的连接redis的操作，就用不了了

如果连接不上，可能因为端口没开，或者防火墙没关

import redis
# 普通连接
# conn = redis.Redis("10.0.0.200", 6379)
# a = conn.get("name")
# print(a)
# conn.close()

# 连接哨兵
from redis.sentinel import Sentinel

sentinel = Sentinel([
    ("10.0.0.200", 26379),
    ("10.0.0.200", 26380),
    ("10.0.0.200", 26381),
], socket_timeout=5)

# 获取主服务器的地址
master = sentinel.discover_master("mymaster")
print(master)

# 获取从服务器的地址
slave = sentinel.discover_slaves("mymaster")
print(slave)

读写分离

# 读写分离

master1 = sentinel.master_for("mymaster", socket_timeout=0.5)
master1.set("func","nn")

slave1 = sentinel.slave_for("mymaster", socket_timeout=0.5)
a = slave1.get("func")
print(a)

python操作集群

"""
一旦搭建了集群，python操作也变了
rediscluster
pip3 install redis-py-cluster

"""
from rediscluster import RedisCluster
# 配节点的主机就行
startup_nodes = [
    {"host": "10.0.0.200", "port": "7000"},
    {"host": "10.0.0.200", "port": "7001"},
    {"host": "10.0.0.200", "port": "7002"},
]

rc = RedisCluster(startup_nodes=startup_nodes)
rc.set("name", "lqz")
print(rc.get("name"))

缓存优化

redis缓存更新策略

redis本身，内存存储，会出现内存不够用，放数据放不进去，有些策略，删除一部分数据，在放新的
LRU/LFU/FIFO算法剔除：例如maxmemory-policy(到了最大内存，对应的应对策略)

LRU -Least Recently Used, 没有被使用时间最长的
LFU -Least Frequenty Used, 一定时间段内使用次数最少的
FIFO -First In First Out  先进先出

缓存击穿，雪崩，穿透

缓存穿透

描述：

缓存穿透是指缓存和数据库中都没有数据，而用户不断发起请求，如发起id为"-1"的数据或id为特别大不存在的数据。这时用户很有可能是攻击者，攻击会导致数据库压力过大。

解决方案:

接口层增加校验，如用户鉴权校验，id做基础校验，id<=0的直接拦截。
从缓存取不到数据，在数据库中也没有取到，这时也可以将key-value对写成key-null，缓存有效时间可以设置短点，如30秒(设置太长会导致正常情况也没法使用)。这样可以防止攻击用户反复用同一个id暴力攻击
通过布隆过滤器实现

缓存击穿

描述：
缓存击穿是指缓存中没有但数据库中有的数据(一般是缓存时间到期)，这时由于并发用户特别多，同时读缓存没读到数据，又同时去数据库中取数据，引起数据库压力瞬间增大，造成过大压力

解决方案：

设置热点数据永不过期

缓存雪崩

描述：

缓存雪崩是指缓存中数据大批量到过期时间，而查询数据量巨大，引起数据库压力过大甚至down机。和缓存击穿不同的是，缓存击穿指并发查同一条数据，缓存雪崩是不同数据都过期了，很多数据都查不到从而查数据库。