redis专题:redis集群的动态扩容缩容,水平扩展 |
您所在的位置:网站首页 › 如何访问redis集群 › redis专题:redis集群的动态扩容缩容,水平扩展 |
文章目录
1. 扩容背景介绍2. redis集群扩容2.1 增加redis实例2.2 配置8007为master节点2.3 配置8008为8007的从节点
3. redis集群缩容3.1 先返还槽位数据3.2 删除8007节点
1. 扩容背景介绍
在电商项目双11期间,通常有更多的并发,对redis的请求压力激增,需要更多的redis对外提供服务,但是过了双11,redis压力骤降,为了节省成本,需要撤出部分redis服务!我们可以通过增加和删除redis集群节点来实现redis集群的动态扩容、缩容,增加redis集群的高可用性。 原始集群(见下图)由6个节点组成,6个节点分布在三台机器上(本案例仅在一台机器演示!),采用三主三从的模式 在集群扩容之前,我们需要启动原redis集群,并观察集群状态是否正常,如果正常才可进行扩容、缩容。点此处查看如何 配置和启动redis集群! 启动成功后通过cluster nodes命令查看节点状态 原集群启动并确认健康后,我们在原始集群基础上再增加一主(8007)一从(8008),实现集群扩容,步骤如下: 2.1 增加redis实例在/usr/local/redis-cluster下创建8007和8008文件夹,并拷贝8001文件夹下的redis.conf文件到8007和8008这两个文件夹下,具体步骤如下所示: mkdir 8007 8008 cd 8001 cp redis.conf /usr/local/redis-cluster/8007/ cp redis.conf /usr/local/redis-cluster/8008/ # 修改8007文件夹下的redis.conf配置文件 vim /usr/local/redis-cluster/8007/redis.conf # 修改如下内容: port:8007 dir /usr/local/redis-cluster/8007/ cluster-config-file nodes-8007.conf pidfile /var/run/redis_8007.pid # 修改8008文件夹下的redis.conf配置文件 vim /usr/local/redis-cluster/8008/redis.conf 修改内容如下: port:8008 dir /usr/local/redis-cluster/8008/ cluster-config-file nodes-8008.conf pidfile /var/run/redis_8008.pid # 启动8007和8008俩个服务并查看服务状态 /usr/local/redis-5.0.3/src/redis-server /usr/local/redis-cluster/8007/redis.conf /usr/local/redis-5.0.3/src/redis-server /usr/local/redis-cluster/8008/redis.conf ps -el | grep redis启动完成后,8007 和 8008 两个节点还处于游离状态,还未加入redis集群中! 2.2 配置8007为master节点使用redis-cli的add-node命令新增一个主节点8007(master),前面的ip:port为新增节点,后面的ip:port为集群中已存在的节点。 src/redis-cli --cluster add-node 192.168.100.100:8007 192.168.100.100:8001这个过程是通过gossip协议的meet命令进行操作的! meet:某个节点发送meet给新加入的节点,让新节点加入集群中,然后新节点就会开始与其他节点进行通信;最后看到日志最后有"[OK] New node added correctly"提示代表新节点加入成功 添加成功后通过cluster nodes命令查看节点状态如下 执行上述命令后,将进入手动分配槽位流程,分配详情如下: ... ... How many slots do you want to move (from 1 to 16384)? 600 (ps:需要多少个槽移动到新的节点上,自己设置,比如600个hash槽) What is the receiving node ID? 2728a594a0498e98e4b83a537e19f9a0a3790f38 (ps:把这600个hash槽移动到哪个节点上去,需要指定节点id) Please enter all the source node IDs. Type 'all' to use all the nodes as source nodes for the hash slots. Type 'done' once you entered all the source nodes IDs. Source node 1:all (ps:输入all为从所有主节点(8001,8002,8003)中分别抽取相应的槽数指定到新节点中,抽取的总槽数为600个) ... ... Do you want to proceed with the proposed reshard plan (yes/no)? yes (ps:输入yes确认开始执行分片任务) ... ...槽位分配完成后,再次通过cluster nodes命令查看节点状态如下: 至此!8007master节点加入集群成功! 2.3 配置8008为8007的从节点重复8007节点加入集群命令add-node src/redis-cli --cluster add-node 192.168.100.100:8008 192.168.100.100:8001通过cluster nodes命令查看节点状态 再通过cluster nodes命令查看节点状态 redis集群缩容其实就是删除某些集群节点,在这里我们通过把上面加入的8007、和8008组成的集群节点删除来测试集群缩容! 3.1 先返还槽位数据因为主节点8007的里面是有分配了hash槽的,所以我们这里必须先把8007里的hash槽放入到其他的可用主节点中去,然后再进行移除节点操作,不然会出现数据丢失问题(目前只能把master的数据迁移到一个节点上,暂时做不了平均分配功能),执行命令如下: src/redis-cli --cluster reshard 192.168.100.100:8007输入如下: ... ... How many slots do you want to move (from 1 to 16384)? 600 What is the receiving node ID? baf0c2f3afde2410e34351a8261a703f1394cee9 (ps:这里是需要把数据移动到哪?8001的主节点id) Please enter all the source node IDs. Type 'all' to use all the nodes as source nodes for the hash slots. Type 'done' once you entered all the source nodes IDs. Source node 1:4b339ad25b4884c2ff6de8a8ec2bc8766f8faf0b (ps:这里是需要数据源,也就是我们的8007节点id) Source node 2:done (ps:这里直接输入done 开始生成迁移计划) ... ... Do you want to proceed with the proposed reshard plan (yes/no)? Yes (ps:这里输入yes开始迁移)至此,我们已经成功的把8007主节点的数据迁移到8001上去了,我们可以看一下现在的集群状态如下图,你会发现8007下面已经没有任何hash槽了,证明迁移成功! 最后我们直接使用del-node命令删除8007主节点即可 src/redis-cli --cluster del-node 192.168.100.100:8007 4b339ad25b4884c2ff6de8a8ec2bc8766f8faf0b最后cluster nodes命令查看节点状态,如果还原如初,则说明缩容成功! |
今日新闻 |
推荐新闻 |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |