Redis-5.0集群部署

最新推荐文章于 2024-03-06 22:36:12 发布
原创 最新推荐文章于 2024-03-06 22:36:12 发布 · 536 阅读 · 1 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
标签
#redis #运维 #数据库
本文详述了如何在Ubuntu-18.04环境下搭建Redis 5.0.0集群，包括编译安装、配置节点、启动节点、创建集群、分配槽位和设置从节点，以及后续的节点动态增删和槽位重分配操作，确保集群稳定运行。
环境准备

Ubuntu-18.04
redis-5.0.0
make

集群分布

redis-1: 172.16.10.124 role master：7001 7002 7003 slave: 7004 7005 7006
redis-2: 172.16.10.125 role slave：7001 7002 7003

编译安装

以下步骤在redis-1进行

1. 新建编译安装目录

mkdir -p /home/dsp/redis/
cd /home/dsp/redis
mkdir redis-cluster redis-dist
cd redis-cluster
mkdir 7001 7002 7003 7004 7005 7006

2. 下载redis5.0源码修改编译

cd /home/dsp/redis/
wget http://download.redis.io/releases/redis-5.0.0.tar.gz
tar xzvf redis-5.0.0.tar.gz 
mv redis-5.0.0 redis-build
cd redis--build
vim src/Makefile

# PREFIX?=/usr/local
PREFIX?=/home/dsp/redis/redis-dist

3. 编译安装

cd /home/dsp/redis/redis-build
make && make install
节点配置

4. 修改配置文件

cd /home/redis/redis-cluster/7001/
cp ../../redis-build/redis.conf .
vim redis.conf

bind 172.16.10.124                              ##  改为本机ip,其他机器可以访问，否则无法创建集群
#protected-mode yes                             ##  保护模式，限制从其它机器登录redis-server,只能从127.0.0.1
port 7001                                       ##  redis客户端连接端口，同时会启动一个大于10000的端口用于主从复制和集群内部通信
daemonize yes                                   ##  redis后台运行
pidfile /var/run/redis_7001.pid                 ##  pidfile位置，daemonize为yes时才会生效
logfile "redis_7001.log"                        ##  redis日志文件，可包含目录和文件名，redis不会自动滚动日志文件
save 900 1                                      ##  刷新快照(RDB)到磁盘的策略，根据实际调整值，“save 900 1”表示900秒后至少有一个key被修改才触发save操作，其他类推
#save 300 10                                    ##
#save 60 10000                                  ##
appendonly yes                                  ##  当同时写AOF或RDB,则redis启动时只会加载AOF,AOF包含了全量数据。如果当队列使用，入队压力过大的话，可设置为no
cluster-enabled yes                             ##  以集群方式运行，no,表示以非集群方式运行
cluster-config-file nodes-7001.conf             ##  不能包含目录，存放在对应的节点目录（7001,7002....）下，纯文件名，为redis-server进程自动维护，不能手动修改
cluster-node-timeout 15000                      ##  毫秒，判断节点失效(fall)之前，允许不可用的最大时长，如果master不可用时长超过此值，则会被failover,这个值不能太小

注意： 将7001下刚修改的配置文件分别复制到7002,7003,7003,7004,7005,7006,注意一定要修改对应端口号

启动节点

5. 须切换到各节点目录然后启动

cd /home/dsp/redis/redis-cluster/7001
../../redis-dist/bin/redis-server redis.conf    ##  启动redis-7001节点
cd ../7002
../../redis-dist/bin/redis-server redis.conf    ##  启动redis-7002节点
cd ../7003
../../redis-dist/bin/redis-server redis.conf    ##  启动redis-7003节点
cd ../7004
../../redis-dist/bin/redis-server redis.conf    ##  启动redis-7004节点
cd ../7005
../../redis-dist/bin/redis-server redis.conf    ##  启动redis-7005节点
cd ../7006
../../redis-dist/bin/redis-server redis.conf    ##  启动redis-7006节点
检查redis启动情况

6. 查看redis线程

ps -ef | grep redis

dsp@redis-1:~/redis/redis-cluster/7006$ ps -ef | grep redis
dsp        1391      1  0 Mar14 ?        00:08:18 ../../redis-dist/bin/redis-server 172.16.10.124:7003 [cluster]
dsp        1407      1  0 Mar14 ?        00:08:18 ../../redis-dist/bin/redis-server 172.16.10.124:7005 [cluster]
dsp       58160      1  0 09:27 ?        00:00:00 ../../redis-dist/bin/redis-server 172.16.10.124:7001 [cluster]
dsp       58170      1  0 09:28 ?        00:00:00 ../../redis-dist/bin/redis-server 172.16.10.124:7002 [cluster]
dsp       58178      1  0 09:28 ?        00:00:00 ../../redis-dist/bin/redis-server 172.16.10.124:7004 [cluster]
dsp       58195      1  0 09:28 ?        00:00:00 ../../redis-dist/bin/redis-server 172.16.10.124:7006 [cluster]
dsp       58204  57762  0 09:28 pts/0    00:00:00 grep --color=auto redis

7. 查看redis端口监听

netstat -tunpl | grep redis

dsp@redis-1:~/redis/redis-cluster/7006$ netstat -tunpl | grep redis
(Not all processes could be identified, non-owned process info
 will not be shown, you would have to be root to see it all.)
tcp        0      0 172.16.10.124:17001     0.0.0.0:*               LISTEN      58160/../../redis-d 
tcp        0      0 172.16.10.124:17002     0.0.0.0:*               LISTEN      58170/../../redis-d 
tcp        0      0 172.16.10.124:17003     0.0.0.0:*               LISTEN      1391/../../redis-di 
tcp        0      0 172.16.10.124:17004     0.0.0.0:*               LISTEN      58178/../../redis-d 
tcp        0      0 172.16.10.124:17005     0.0.0.0:*               LISTEN      1407/../../redis-di 
tcp        0      0 172.16.10.124:17006     0.0.0.0:*               LISTEN      58195/../../redis-d 
tcp        0      0 172.16.10.124:7001      0.0.0.0:*               LISTEN      58160/../../redis-d 
tcp        0      0 172.16.10.124:7002      0.0.0.0:*               LISTEN      58170/../../redis-d 
tcp        0      0 172.16.10.124:7003      0.0.0.0:*               LISTEN      1391/../../redis-di 
tcp        0      0 172.16.10.124:7004      0.0.0.0:*               LISTEN      58178/../../redis-d 
tcp        0      0 172.16.10.124:7005      0.0.0.0:*               LISTEN      1407/../../redis-di 
tcp        0      0 172.16.10.124:7006      0.0.0.0:*               LISTEN      58195/../../redis-d

现在六个节点是相互独立，下一步创建集群

创建集群

8. 使用redis-cli命令行工具，将6个节点添加到集群

/home/dsp/redis/redis-dist/bin/redis-cli -h 172.16.10.124 -p 7001
172.16.10.124:7001>cluster meet 172.16.10.124 7002   ##  发现节点7002
ok
172.16.10.124:7001>cluster meet 172.16.10.124 7003   ##  发现节点7003
ok
172.16.10.124:7001>cluster meet 172.16.10.124 7004   ##  发现节点7004
ok
172.16.10.124:7001>cluster meet 172.16.10.124 7005   ##  发现节点7005
ok
172.16.10.124:7001>cluster meet 172.16.10.124 7006   ##  发现节点7006
ok
172.16.10.124:7001> cluster nodes                    ##  查看各节点(这里是配置完成后的状态)
0d5f60ff7924fa50481be549468c5573fdfcec61 172.16.10.124:7005@17005 master - 0 1552818771245 33 connected 0-332 911-1465 6371-6412 8213-10922 11832-13653
36e9750c9a96d4f7d7ce426c33e480c2e9495556 172.16.10.124:7006@17006 slave 6d76523a04caf087b10ce7a9a142e61226160706 0 1552818768000 31 connected
35f038cc759359c5b667ff0eec340ae6fb74281b 172.16.10.125:7001@17001 master - 0 1552818767236 38 connected 333-910 1466-3617 4549-6370 10923-11831
ce9fdb802e79b267cd53ceabdd5f6eebc9c8c62b 172.16.10.124:7001@17001 myself,slave 35f038cc759359c5b667ff0eec340ae6fb74281b 0 1552818768000 28 connected
93f1c6aad0638d18afabf6aab359ca7a2bb67be0 172.16.10.124:7002@17002 slave 0d5f60ff7924fa50481be549468c5573fdfcec61 0 1552818770243 33 connected
9e1791317caf8f73ee5806c33050b8e2d6c8a35d 172.16.10.125:7002@17002 slave 0d5f60ff7924fa50481be549468c5573fdfcec61 0 1552818769241 33 connected
6d76523a04caf087b10ce7a9a142e61226160706 172.16.10.124:7003@17003 master - 0 1552818768000 31 connected 3618-4548 6413-8212 13654-16383
1f2fb0de1f9c228854b54160bd6a802dac22b4a3 172.16.10.124:7004@17004 slave 35f038cc759359c5b667ff0eec340ae6fb74281b 0 1552818766000 38 connected
2fec3d068a518897769a4d3074ae3dadedf8b73c 172.16.10.125:7003@17003 slave 6d76523a04caf087b10ce7a9a142e61226160706 0 1552818768239 31 connected

9. master节点分配槽位

## 0~16383，一共16384个槽位，这里设置三个master均分
../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7001 cluster addslots {0..5461}     
../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7002 cluster addslots {5462..10922}
../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7003 cluster addslots {10923..16383}

10. 分配slave节点

../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7004 cluster replicate "master-node-id"
../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7004 cluster replicate ce9fdb802e79b267cd53ceabdd5f6eebc9c8c62b   ## 设置7004为7001的slave节点
../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7005 cluster replicate 93f1c6aad0638d18afabf6aab359ca7a2bb67be0   ## 设置7005为7002的slave节点
../../redis-dist/bin/redis-cli -h 172.16.10.124 -p 7006 cluster replicate 6d76523a04caf087b10ce7a9a142e61226160706   ## 设置7006为7003的slave节点

至此，集群创建完成，节点对应关系如下

master-7001→slave-7004
master-7002→slave-7005
master-7003→slave-7006

验证集群

11. 使用redis-cli --cluster check查看集群状态

../../redis-dist/bin/redis-cli --cluster check 172.16.10.124:7004

12. 如下，三个master,六个slave,以及每个master槽位分配情况(这里是故障模拟以及动态增加节点后的状态,仅供参考)

dsp@redis-1:~/redis/redis-cluster/7006$ ../../redis-dist/bin/redis-cli --cluster check 172.16.10.124:7004
172.16.10.124:7003 (6d76523a...) -> 6 keys | 5461 slots | 2 slaves.
172.16.10.125:7001 (35f038cc...) -> 4 keys | 5461 slots | 2 slaves.
172.16.10.124:7005 (0d5f60ff...) -> 0 keys | 5462 slots | 2 slaves.
[OK] 10 keys in 3 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 172.16.10.124:7004)
S: 1f2fb0de1f9c228854b54160bd6a802dac22b4a3 172.16.10.124:7004
   slots: (0 slots) slave
   replicates 35f038cc759359c5b667ff0eec340ae6fb74281b
M: 6d76523a04caf087b10ce7a9a142e61226160706 172.16.10.124:7003
   slots:[3618-4548],[6413-8212],[13654-16383] (5461 slots) master
   2 additional replica(s)
S: 36e9750c9a96d4f7d7ce426c33e480c2e9495556 172.16.10.124:7006
   slots: (0 slots) slave
   replicates 6d76523a04caf087b10ce7a9a142e61226160706
S: 9e1791317caf8f73ee5806c33050b8e2d6c8a35d 172.16.10.125:7002
   slots: (0 slots) slave
   replicates 0d5f60ff7924fa50481be549468c5573fdfcec61
S: ce9fdb802e79b267cd53ceabdd5f6eebc9c8c62b 172.16.10.124:7001
   slots: (0 slots) slave
   replicates 35f038cc759359c5b667ff0eec340ae6fb74281b
S: 2fec3d068a518897769a4d3074ae3dadedf8b73c 172.16.10.125:7003
   slots: (0 slots) slave
   replicates 6d76523a04caf087b10ce7a9a142e61226160706
M: 35f038cc759359c5b667ff0eec340ae6fb74281b 172.16.10.125:7001
   slots:[333-910],[1466-3617],[4549-6370],[10923-11831] (5461 slots) master
   2 additional replica(s)
M: 0d5f60ff7924fa50481be549468c5573fdfcec61 172.16.10.124:7005
   slots:[0-332],[911-1465],[6371-6412],[8213-10922],[11832-13653] (5462 slots) master
   2 additional replica(s)
S: 93f1c6aad0638d18afabf6aab359ca7a2bb67be0 172.16.10.124:7002
   slots: (0 slots) slave
   replicates 0d5f60ff7924fa50481be549468c5573fdfcec61
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

13. 通过set/get检测集群

登陆不同的节点进行set get检验，这里略过
动态增加slave节点

14. 重复步骤1，2，3，4，5，在redis-2服务器新建节点并启动
注意配置文件的bind设置，启动后，根据步骤8 将新增的节点添加到cluster,最后步骤10，设置slave

15. 检测集群状态

../../redis-dist/bin/redis-cli --cluster check 172.16.10.124:7004

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-YXcDButl-1629874929735)(redis-cluster-check.jpg )]

动态增加master节点(redis-2服务器增加7004节点作为master)

16. 重复步骤1、2、3、4、5、8

17. 槽位重分配

../../redis-cli --cluster reshard 172.16.10.125:7004

新加入的master由于没有分配槽位，是没有任何数据的

删除节点
“172.16.10.124:7001” 为集群中任意一个非待删除节点，"node-id"为待删除节点，如果删除节点为master节点,则在删除前需要将该master下负责的slot先行迁移，具体参考步骤17
../../redis-dist/bin/redis-cli --cluster del-node 172.16.10.124:7001 2fec3d068a518897769a4d3074ae3dadedf8b73c

如果删除后，其它节点还看得到这个节点，则通过“forget”命令解决，需要在所有看的到的节点执行

cluster forget "node-id"
hifantasy
关注
手把手教你用LAMMPS的BKS势函数模拟二氧化硅：从参数设置到结果分析（含避坑指南）
最新发布
weixin_30596165的博客
04-19 402
本文详细介绍了如何使用LAMMPS的BKS势函数模拟二氧化硅，从参数设置到结果分析的全流程。通过解析BKS势函数的物理意义、晶体建模技巧及常见问题排查，帮助读者掌握二氧化硅模拟的关键技术。特别包含避坑指南，确保模拟过程高效准确，适用于材料科学研究和分子动力学模拟。
【Redis】第1篇 在windows与Ubuntu下安装redis教程
Fanjufei的博客
04-12 3722
Redis（Remote Dictionary Server）是一个开源的高性能键值存储数据库管理系统。它是一种基于内存的数据结构存储系统，可用作数据库、缓存和消息队列等多种用途。快速：Redis 基于内存操作数据，因此具有出色的读取和写入性能。它使用了高效的数据结构，如哈希表、字符串和有序集合，使得它在处理大量数据和高并发访问时表现优异。数据模型：Redis 是一个键值存储系统，每个键都与一个值相关联。这些值可以是字符串、哈希表、列表、集合、有序集合等多种数据类型。
Redis(5.0)
qq_36697948的博客
03-06 2041
Redis 的 Set（集合）数据类型是一种无序的、不重复元素的集合。Set 中的每个成员必须是唯一的，这意味着你不能在同一个 Set 中添加两个相同的值。常用命令sadd 【key】【value1 value2 value3 ……】 --向key中添加一个或多个元素。smembers 【key】 --获取【key】中的所有元素。sismember 【key】【元素】 --判断元素是否是集合 key 的成员；1表示是；0 表示 不是。scard 【key】 --获取集合中的元素个数。
Linux安装redis5.0 (超完整图文详细教程)
cxSmiles的博客
02-12 7325
Linux安装redis5.0 (超完整图文详细教程)
Redis5.0版本后使用详解
weixin_43790613的博客
07-31 2139
文章目录客户端命令数据操作命令String类型数据库 查看Redis安装目录whereis redis 客户端命令 客户端登录命令：redis-cli -h ip -p port -a "密码" ,-h后面是ip，-p后面是端口号，-a后面是密码，有的登录不支持密码，需要登录使用auth "密码"命令，才能使用命令 查看所有key值命令：keys * 数据操作命令 查看key值的数据类型：type key String类型 设置值：set key value key为变量名，value为变
Redis5.0的安装和配置
wudening的博客
08-03 2509
Redis的安装 这里安装的是Redis5.0的版本，系统为MacOS 10.15.2 1.官方下载Redis5.0.7(稳定最新版),下载地址 Redis 2.解压后得到redis-5.0.7文件夹，然后进入该文件夹(/Users/macos/dev/redis-5.0.7) cd ~ cd dev cd redis-5.0.7 3.编译redis(在redis-5.0.7文件夹内执行),用s......
redis-5.0.5 集群安装部署
这个屌人啥也没有…
11-16 474
前期准备： 准备2台服务器，可以是虚拟机。 操作系统：CentOS系统7.6 待部署IP：192.168.80.221, 192.168.80.222 Redis安装包：redis-5.0.5.tar.gz 安装过程： 安装支持的库文件： # yum -y install gcc auto make autoconf libtool make 上传安装包，然后解压： cd /usr/local/redis/ tar -zxvf redis-5.0.5.tar.gz 编译与安装： .
Redis5.0.7的部署与集群搭建
h_big_tiger的博客
11-22 1696
Redis5.0.7的部署与集群搭建 一、单机版部署 第一步：下载最新稳定版 wget http://download.redis.io/releases/redis-5.0.7.tar.gz 第二步：解压 tar -zxvf redis-5.0.7.tar.gz 第三步：进入解压后文件夹并编译 $ cd redis-5.0.7 $ make 第四步：运行 $ src/redis-serve...
centos7 redis5.0以后版本 集群部署示例
papaya的博客
04-16 259
简言 1. redis5.0版本以前的集群部署是使用ruby脚本完成的，略为复杂，具体示例见笔者的这篇博客，https://blog.csdn.net/yzf279533105/article/details/103696990 2. 本篇博客讲解redis5.0版本以后的集群部署，由于集成到了create_cluster中（位置：redis根目录/utils/create-cluster/c...
离线环境K8S部署Redis:5.0.5-alpine三主三从集群
qq_34677946的博客
12-08 1572
K8S中部署Redis三主三从集群，涉及到ConfigMap、StatefulSet、Headless Svc、redis账号密码通过configMap进行修改等等操作。
ubuntu16 redis5.0以后版本集群部署示例
papaya的博客
04-16 590
简言 1. redis5.0版本以前的集群部署是使用ruby脚本完成的，略为复杂，具体示例见笔者的这篇博客，https://blog.csdn.net/yzf279533105/article/details/105230296 2. 本篇博客讲解redis5.0版本以后的集群部署，由于集成到了create_cluster中（位置：redis根目录/utils/create-cluster/c......
集群搭建_Redis5 搭建集群
weixin_32384723的博客
12-29 212
一、搭建集群环境1.创建目录创建/root/software/redis 目录2.下载源码并解压编译wget http://download.redis.io/releases/redis-5.0.0.tar.gztar xzf redis-5.0.0.tar.gzcd redis-5.0.0make3.创建6个Redis配置文件6个配置文件不能在同一个目录，如下：/root/software/r...
Redis 5.0.5配置文件 解读尝试
码地
10-22 2110
1、设置单位 当你需要为某个配置项指定内存大小的时候，可以指定类似于1k 5GB 4M等等这样的值来进行设置。 必须要带上单位，其转换方式如下（单位不区分大小写） 1k => 1000 bytes 1kb => 1024 bytes 1m => 1000000 bytes 1mb => 1024*1024 bytes 1g => 1000000000 by...
Redis5.0版本特性介绍
wejack的专栏
06-15 1741
redis5.0版本特性介绍
Redis5.0集群搭建（Redis Cluster）
热门推荐
Lyndon的专栏
09-01 1万+
Redis5.0集群搭建RedisCluster
Redis5.0集群搭建及一些新特性
叶小刀
08-18 566
安装Redis5.0 1.新的Stream数据类型【其他5种：String，set，sorted-set，hash，list】 本质是一个抽象日志。 命令操作： 消费组： >表示读取最新的消息，第二次执行的>，是又插入之后读取的。 读取某个ID之后的消息： Block 0 表示阻塞，也就是在客户端新插入消...
docker部署redis集群5.0过程整理
千山
07-04 415
目录 前言 环境准备 获取镜像 redis 集群 1.创建redis配置文件（redis-cluster.tmpl) 2.创建自定义的network 3.创建集群机器所有的文件夹，默认创建6个 4.创建docker容器，默认创建6个 5.集群设置密码 1.在创建集群时 2.创建集群后依次进入节点设置 参考资料 前言 redis作为一个开源的内存存储数据服务器，被当作数据库，高速缓存，消息队列大量使用。通常在测试环境我们用单节点的redis就能够用，正式环境用集群模式（避免单..
ubuntu18.04  docker部署redis5.0集群
志在远方
01-20 853
自己电脑是ubuntu18.04 本机测试redis5.0 下面是配置文件把文件放到home下面redis文件夹下 配置文件来自redis5链接(额外修改了一下bind地址,集群设置 除此之外没怎么动) 各种版本配置链接 /home/yunlei/redis/redis.conf # Redis configuration file example. # # Note that i...
【数据库】多台服务器上redis 5.0集群部署实战
veronachiu的博客
11-18 985
前言 由于业务需要，数据需存储在redis集群中，在三台linux服务器上部署redis集群，三台redis服务器的ip地址和端口如下： |主机名|ip地址 |端口 |redis02|172.22.16.8|7000,7001 |redis01|172.22.16.9|7000,7001 |redis02|172.22.16.10|7000,7001 安装redis 在每台服务器上均执行以下操作，安装两个redis集群节点，下面操作以在172.22.16.8为例。 下载redis安装包，并在/usr/l
redis-5.0.5 集群部署
09-23 312
之前写过一套基于redis-4.0.6版本的测试集群部署 https://www.cnblogs.com/mrice/p/10730309.html 最近生产环境需要部署一套redis-5.0.5版本集群； 环境: 服务器：6台 操作系统:Red Hat Enterprise Linux Server release ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值