Redis Cluste部署

一.原生搭建篇Cluster了解cluster的架构

Redis-cluster是使用的是一致性哈希算法来切分数据存储,总计16383个槽,分成16383/N(redis节点)个分区,存取时将key转换成int,key/16383来决定存取在哪个分区。

1.redis.conf配置文件中开启支持cluster集群,改名字为redis-cluster-7000.conf(方便后面集群管理)

port 7000
daemonize yes
pidfile /var/run/redis-7000.pid
dir /opt/module/redis-cluster/data
logfile "7000.log"
dbfilename "dump-7000.rdb"
#开启集群
cluster-enabled yes
#集群中本节点配置文件名 自动生成
cluster-config-file nodes-7000.conf
#当集群中某个节点挂了,整个集群是否停止服务,设置成no 继续提供服务
cluster-require-full-coverage no

2.用上面的配置文件启动redis,确保配置文件没问题

3.sed命令生成其他节点的配置文件

sed "s/7000/7001/g" redis-cluster-7000.conf >redis-cluster-7001.conf 
sed "s/7000/7002/g" redis-cluster-7000.conf >redis-cluster-7002.conf 
sed "s/7000/7003/g" redis-cluster-7000.conf >redis-cluster-7003.conf 
sed "s/7000/7004/g" redis-cluster-7000.conf >redis-cluster-7004.conf 
sed "s/7000/7005/g" redis-cluster-7000.conf >redis-cluster-7005.conf 
sed "s/7000/7006/g" redis-cluster-7000.conf >redis-cluster-7006.conf 

4.启动每个节点 redis-server redis-cluster-700(1~6).conf

启动后会生成相应的nodes-700(0~6).conf文件。该文件列出了群集中其他节点,它们的状态,持久变量等等。 由于某些消息的接收,通常会将此文件重写并刷新到磁盘上。

5.每个节点互通(meet)

meet通信,保证每个节点能够知道其他节点负责的槽区间。

结构图:

 

官方:

请注意,Redis 群集需要形成完整的网格(每个节点与其他节点相连,如上图),但为了创建群集,不需要发送形成完整网格所需的所有 CLUSTER MEET 命令。重要的是发送足够的 CLUSTER MEET 消息,以便每个节点都可以通过一系列已知节点到达每个其他节点。

所以只需要有一条通路就可以

进去7000的节点,执行cluster meet 与其他节点通信

redis-cli -p 7000
CLUSTER MEET 127.0.0.1 7001
CLUSTER MEET 127.0.0.1 7002
CLUSTER MEET 127.0.0.1 7003
CLUSTER MEET 127.0.0.1 7004
CLUSTER MEET 127.0.0.1 7005
CLUSTER MEET 127.0.0.1 7006

6.查看是否连通

redis-cli -p 7000 cluster info
#结果: cluster_state:fail #集群状态 cluster_slots_assigned:
0 #被分配的槽位数 cluster_slots_ok:0 #正确分配的槽位 cluster_slots_pfail:0 cluster_slots_fail:0 cluster_known_nodes:7 #当前集群下的所有节点,包括主从节点,7说明通了 cluster_size:0 #当前集群下的有槽位分配的节点,即主节点 cluster_current_epoch:6 cluster_my_epoch:1 cluster_stats_messages_ping_sent:1391 cluster_stats_messages_pong_sent:1375 cluster_stats_messages_meet_sent:6 cluster_stats_messages_sent:2772 cluster_stats_messages_ping_received:1375 cluster_stats_messages_pong_received:1397 cluster_stats_messages_received:2772

7.分配槽

采用的是一致性哈希算法,来分配总共给定的16383个槽,此处为了方便就均分了,实际开发中建议根据服务器配置分配。

这里使用7001-7003作为主节点 7004-7006做从节点

#此处的分配规则
7001   0~5000
7002   5001~10000
7003   10001~16383
#代码:
redis-cli -p 7001 CLUSTER ADDSLOTS 5000
redis-cli -p 7002 CLUSTER ADDSLOTS 10000
redis-cli -p 7003 CLUSTER ADDSLOTS 16838

结构图:

 

8.配置主从

这里需要用到Nodeid,第一步中配置生成的文件中可以看

#第一步的配置  可以查看nodes-7000.conf这个文件
cluster-config-file nodes-7000.conf

一一对应:红框为Nodeid

进入每个主节点用 cluster replicate <Nodeid>

redis-cli -p 7001 cluster replicate da47d14c9e4079ad0973546027f598aab3596fff

查看结果

redis-cli -p 7001 cluster nodes

到此原生配置完成。

下一篇开始Ruby快速搭建Cluster集群。

由于Redis5+移除掉了Ruby,官方说明Redis-trib.rb移到Redis-cli -cluster命令,下一篇没了。

 

使用redis-cli --cluster快速搭建集群

#前面步骤一样
1.配置主从
多个主从使用"\"隔离开
<几个从>指定多少个从节点
# redis-cli --cluster create <主:port>  <从1:port> <从2:port> \ <主1> > <从1> \.... --cluster-replicas <几个从>
./redis-cli --cluster create 127.0.0.1:7001 127.0.0.1:7004 \ 127.0.0.1:7002 127.0.0.1:7005 \ 127.0.0.1:7003 127.0.0.1:7006 --cluster-replicas 1

2.分配槽

#reshard host:port
#  --cluster-from <arg>
#  --cluster-to <arg>
#  --cluster-slots <arg>
#  --cluster-yes
#  --cluster-timeout <arg>
#  --cluster-pipeline <arg>
#  --cluster-replace

./redis-cli --cluster reshard 127.0.0.1:7001 --cluster-from 0 --cluster-to 5000

 

posted @ 2019-09-27 11:55  懵懂的半壶  阅读(438)  评论(0编辑  收藏  举报