[Database] Redis 随笔

Redis 随笔

1. 特点

  • 非关系数据库 non-relational database
  • 内存数据库
  • 高性能
  • 主从复制
  • 可持久化存储
  • 发布与订阅
  • 支持脚本

2. 数据类型5种

STRING

  • 可以是字符串、整数、浮点数
  • 操作
    • 对整个字符串或都字符串的一部分执行操作;
    • 对整数或浮点数执行自增或自减操作;

LIST

  • 链表,每个节点都包含一个字符串
  • 操作
    • 从链表两端推入或弹出元素;
    • 依据偏移量对链表进行修剪(trim);
    • 读取单个或者多个元素;
    • 依据值查找或移动元素;

SET

  • 包含字符串的无序收集器,并且各字符串独一无二、各不相同
  • 操作
    • 添加、获取、移除单个元素;
    • 检查一个元素是否存在于集合中;
    • 计算交集、并集、差集;
    • 从集合里面随机获取元素;

HASH

  • 包含键值对的无序散列表
  • 操作
    • 添加、获取、移除单个键值对;
    • 获取所有键值对;

ZSET

  • 字符串成员与浮点数分值之间的有序映射,元素的排列顺序由分值的大小决定
  • 操作
    • 添加、获取、删除单个元素;
    • 依据分值范围或者成员来获取元素

3. 命令

基本事务 transaction

  • MULTI
  • EXEC
  • UNWATCH
  • WATCH
  • DISCARD

4. 数据安全与性能保障

持久化

  • 快照 snapshotting
    • 将存在于某一时刻的所有数据都写入硬盘里面
    • 操作
      • 执行 BGSAVE
      • 执行 SAVE
      • 配置选项 save 60 10000 ; 可以多个条件,条件满足时执行一次BGSAVE
      • 收到SHUTDOWN 或 TERM信号时,会执行SAVE
      • 一个Redis连接另一个Redis 服务器,并发送SYNC 开始复制时,主服务器非刚执行完BGSAVE操作,就会执行BGSAVE
  • AOF 只追加文件 append-only file
    • AOF 持久化会将被执行的写命令写到AOF文件的末尾,以此来记录数据发生的变化。
    • 重写/压缩AOF文件
      • 执行命令 BGREWRITEAOF
      • 设置选项
        • auto-aof-rewrite-min-size
        • auto-aof-rewrite-percentage

复制 replication

  • 让其他服务器拥有一个不断更新的数据副本,从而使拥有副本的服务器可以用于处理客户端发送的读请求。
  • slaveof host port
  • slaveof no one
  • 主从链
  • 检验硬盘写入
    • INFO命令输出结果aof_pending_bio_fsync 属性的值是否为0
  • 验证快照文件和AOF文件
    • redis-check-aof
    • redis-check-dump

事务

  • 事务型流水线
    • PyRedis
      • conn.pipeline()
      • conn.multi *** conn.exec
  • 非事务性流水线
    • PyRedis
      • conn.pipeline(False)

性能测试工具

  • reids-benchmark

分布式锁

Redis使用WATCH命令来代替对数据进行加锁,因为WATCH只会在数据被其他客户端抢先修改了的情况下通知执行了这个命令的客户端,而不会阻止其他客户端对数所进行修改,所以这个命令被称为乐观锁(optimistic locking)

发布、订阅

publish、subscribe


降低内存占用

短结构

Redis 为列表、集合、散列和有序集合提供了一组配置选项,可以让Redis以更节约空间的方式存储长度较短的结构。

在列表、散列、有序集合的长度较短或者体积较小的时候,Redis可以选择使用和种名为压缩列表(ziplist)的紧凑存储方式来存储这些结构。压缩列表以序列化的方式存储数据,这些数据每次被读取的时候都要进行解码,每次被写入的时候也要进行局部的重新编码,并且可能需要对内存里面的数据进行移动。

一般压缩列表的长度限制在 1024 个以内,每个元素体积不能超过 64字节,一般能同时兼顾内存占用和高性能这两方面优点。

配置使用

* list-max-ziplist-entries  512  #允许包含的最大元素数
* list-max-ziplist-value    64   #每个节点最大体积是多少个字节
* hash-max-ziplist-entries  512
* hash-max-ziplist-value    64
* zset-max-ziplist-entries  128
* zset-max-ziplist-value    64
* set-max-intset-entries    512

分片结构 sharding

  • 通过哈希环等算法,把列表、集合、散列分布到多处存储,来减小元素数,从而使用压缩列表减少内存占用。
  • 打包存储二进制位和字节
  • 对于简短并且长度固定的连续ID,可以用分片Redis字符串去存储。

扩展Redis

  • 增加从服务器
  • 使从服务器可写
  • slave-read-only

  • 分片扩展写性能和内存容量


解决实用案例

  • Web 登录缓存
  • 购物车
  • 网页缓存
  • 数据行缓存
  • 基于搜索的应用
  • 定向广告
  • 社交网站

相关链接:
Redis 1
Redis 2

XMIND:

posted @ 2018-07-06 17:10 ABeen 阅读(...) 评论(...) 编辑 收藏