Redis

 

1、redis简介

Redis:key-value类型的内存数据库,纯内存操作,每秒可处理10万次读写操作。

支持保存多种数据结构:String、List、Set、Sorted Set、hashes

主要缺点:数据库容量受物理内存的限制,不能作为海量数据的高性能读写。

 

2、redis比memcached的优势

1)memcached所有的值均是简单的字符串,redis支持的数据类型更丰富;

2)reids的读写速度较memcached快很多;

3)redis可以持久化其数据。

 

3、redis的数据淘汰策略

noeviction:返回错误(当达到内存限制并且客户端不断写入)

allkeys-lru:尝试回收最少使用的键,使得新添加的数据有空间存放

volatile-lru:尝试回收最少使用的键,但仅限于过期集合的键

allkeys-random:回收随机的键,使得新添加的数据有空间存放

volatile-random:回收随机的键,但仅限于过期集合的键

volatile-ttl:回收过期集合的键,并且优先回收存活时间较短的键

 

4、redis集群方案

 

1.twemproxy,大概概念是,它类似于一个代理方式,使用方法和普通redis无任何区别,设置好它下属的多个redis实例后,使用时在本需要连接redis的地方改为连接twemproxy,它会以一个代理的身份接收请求并使用一致性hash算法,将请求转接到具体redis,将结果再返回twemproxy。使用方式简便(相对redis只需修改连接端口),对旧项目扩展的首选。 问题:twemproxy自身单端口实例的压力,使用一致性hash后,对redis节点数量改变时候的计算值的改变,数据无法自动移动到新的节点。

 

2.codis,目前用的最多的集群方案,基本和twemproxy一致的效果,但它支持在 节点数量改变情况下,旧节点数据可恢复到新hash节点。

 

3.redis cluster3.0自带的集群,特点在于他的分布式算法不是一致性hash,而是hash槽的概念,以及自身支持节点设置从节点。具体看官方文档介绍。

 

4.在业务代码层实现,起几个毫无关联的redis实例,在代码层,对key 进行hash计算,然后去对应的redis实例操作数据。 这种方式对hash层代码要求比较高,考虑部分包括,节点失效后的替代算法方案,数据震荡后的自动脚本恢复,实例的监控,等等。

 

5、Redis支持的Java客户端

Redisson、Jedis、lettuce等

Redisson是一个高级的分布式协调Redis客服端,能帮助用户在分布式环境中轻松实现一些Java的对象 (Bloom filter, BitSet, Set, SetMultimap, ScoredSortedSet, SortedSet, Map, ConcurrentMap, List, ListMultimap, Queue, BlockingQueue, Deque, BlockingDeque, Semaphore, Lock, ReadWriteLock, AtomicLong, CountDownLatch, Publish / Subscribe, HyperLogLog)。

 

Jedis是Redis的Java实现的客户端,其API提供了比较全面的Redis命令的支持;Redisson实现了分布式和可扩展的Java数据结构,和Jedis相比,功能较为简单,不支持字符串操作,不支持排序、事务、管道、分区等Redis特性。Redisson的宗旨是促进使用者对Redis的关注分离,从而让使用者能够将精力更集中地放在处理业务逻辑上。

 

6、redis中的管道

一次请求/响应服务器能实现处理新的请求即使旧的请求还未被响应。这样就可以将多个命令发送到服务器,而不用等待回复,最后在一个步骤中读取该答复。

 

7、redis回收进程

 

  1. 一个客户端运行了新的命令,添加了新的数据。

  2. Redi检查内存使用情况,如果大于maxmemory的限制, 则根据设定好的策略进行回收。

  3. 一个新的命令被执行,等等。

  4. 所以我们不断地穿越内存限制的边界,通过不断达到边界然后不断地回收回到边界以下。

 

如果一个命令的结果导致大量内存被使用(例如很大的集合的交集保存到一个新的键),不用多久内存限制就会被这个内存使用量超越。

 

8、redis分区

分区可以让Redis管理更大的内存,Redis将可以使用所有机器的内存。如果没有分区,你最多只能使用一台机器的内存。分区使Redis的计算能力通过简单地增加计算机得到成倍提升,Redis的网络带宽也会随着计算机和网卡的增加而成倍增长。

  • 客户端分区就是在客户端就已经决定数据会被存储到哪个redis节点或者从哪个redis节点读取。大多数客户端已经实现了客户端分区。

  • 代理分区 意味着客户端将请求发送给代理,然后代理决定去哪个节点写数据或者读数据。代理根据分区规则决定请求哪些Redis实例,然后根据Redis的响应结果返回给客户端。redis和memcached的一种代理实现就是Twemproxy

  • 查询路由(Query routing) 的意思是客户端随机地请求任意一个redis实例,然后由Redis将请求转发给正确的Redis节点。Redis Cluster实现了一种混合形式的查询路由,但并不是直接将请求从一个redis节点转发到另一个redis节点,而是在客户端的帮助下直接redirected到正确的redis节点。

 

9、redis持久化方式

  1. RDB持久化方式能够在指定的时间间隔能对你的数据进行快照存储.

  2. AOF持久化方式记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据,AOF命令以redis协议追加保存每次写的操作到文件末尾.Redis还能对AOF文件进行后台重写,使得AOF文件的体积不至于过大.

  3. 如果你只希望你的数据在服务器运行的时候存在,你也可以不使用任何持久化方式.

  4. 你也可以同时开启两种持久化方式, 在这种情况下, 当redis重启的时候会优先载入AOF文件来恢复原始的数据,因为在通常情况下AOF文件保存的数据集要比RDB文件保存的数据集要完整.

  5. 最重要的事情是了解RDB和AOF持久化方式的不同,让我们以RDB持久化方式开始。

 

posted on 2020-02-17 12:56  我要的明天  阅读(180)  评论(0编辑  收藏  举报

导航