reids-5.0版本的高可用集群搭建

Redis系统介绍:

Redis的基础介绍与安装使用步骤
Redis的基础数据结构与使用
Redis核心原理
Redis 5 之后版本的高可用集群搭建
Redis 5 版本的高可用集群的水平扩展
Redis 5 集群选举原理分析
Redis 5 通信协议解析以及手写一个Jedis客户端


1. 集群方案比较:

1.1 哨兵模式:

在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态,如果master节点异常,则会做主从切换,将某一台slave作为master,哨兵的配置略微复杂,并且性能和高可用性等各方面表现一般,特别是在主从切换的瞬间存在访问瞬断的情况,而且哨兵模式只有一个主节点对外提供服务,没法支持很高的并发,且单个主节点内存也不宜设置得过大,否则会导致持久化文件过大,影响数据恢复或主从同步的效率。

哨兵模式

1.2 高可用集群模式:

redis集群是一个由多个主从节点群组成的分布式服务器群,它具有复制、高可用和分片特性。Redis集群不需要sentinel哨兵也能完成节点移除和故障转移的功能。需要将每个节点设置成集群模式,这种集群模式没有中心节点,可水平扩展,据官方文档称可以线性扩展到上万个节点(官方推荐不超过1000个节点)。redis集群的性能和高可用性均优于之前版本的哨兵模式,且集群配置非常简单。

高可用架构

2. 开始搭建

2.1 安装redis

参考之前博客:Redis的基础介绍与安装使用步骤:https://www.jianshu.com/p/2a23257af57b

下载地址:http://redis.io/download

1、安装gcc

1
yum install gcc

2、把下载好的redis-5.0.2.tar.gz放在/usr/local文件夹下,并解压

1
2
3
wget http://download.redis.io/releases/redis-5.0.2.tar.gz
tar xzf redis-5.0.2.tar.gz
cd redis-5.0.2

3、进入到解压好的redis-5.0.2目录下,进行编译与安装

1
make & make install

4、启动并指定配置文件

1
src/redis-server redis.conf

(注意要使用后台启动,所以修改redis.conf里的daemonize改为yes)

5、验证启动是否成功

1
ps -ef | grep redis

6、进入redis客户端

1
2
cd /usr/local/redis/redis-5.0.2/src
./redis-cli

7、退出客户端

1
exit

8、退出redis服务:

1
2
3
pkill redis-server
kill 进程号
src/redis-cli shutdown
2.2 集群搭建

redis集群需要至少要三个master节点,我们这里搭建三个master节点,并且给每个master再搭建一个slave节点,总共6个redis节点,这里用一台机器(可以多台机器部署,修改一下ip地址就可以了)部署6个redis实例,三主三从,搭建集群的步骤如下:

第一步:在机器的/usr/local下创建文件夹redis-cluster,然后在其下面创建6个文件夾如下:

1
2
3
mkdir -p /usr/local/redis-cluster

mkdir 8001 8002 8003 8004 8005 8006

第二步:把之前的redis.conf配置文件copy到8001下,修改如下内容:

1)daemonize yes

2)port 8001(分别对每个机器的端口号进行设置)

3)dir /usr/local/redis-cluster/8001/(指定数据文件存放位置,必须要指定不同的目录位置,不然会丢失数据)

4)cluster-enabled yes(启动集群模式)

5)cluster-config-file nodes-8001.conf(集群节点信息文件,这里800x最好和port对应上)

6)cluster-node-timeout 5000

7) bind 127.0.0.1(去掉bind绑定访问ip信息)

8) protected-mode no (关闭保护模式)

9)appendonly yes

如果要设置密码需要增加如下配置:

10)requirepass xxx (设置redis访问密码)

11)masterauth xxx (设置集群节点间访问密码,跟上面一致)

第三步:把修改后的配置文件,copy到8002-8006,修改第2、3、5项里的端口号,可以用批量替换:

1
%s/源字符串/目的字符串/g

第四步:分别启动6个redis实例,然后检查是否启动成功

1
/usr/local/redis-5.0.7/src/redis-server /usr/local/redis-cluster/800*/redis.conf

第五步:用redis-cli创建整个redis集群(redis5以前的版本集群是依靠ruby脚本redis-trib.rb实现)

1
/usr/local/redis-5.0.7/src/redis-cli -a xxx --cluster create --cluster-replicas 1 192.168.2.116:8001 192.168.2.116:8002 192.168.2.116:8003 192.168.2.116:8004 192.168.2.116:8005 192.168.2.116:8006

代表为每个创建的主服务器节点创建一个从服务器节点

第六步:验证集群:

1)连接任意一个客户端即可:

1
./redis-cli -c -a xxx -h 192.168.2.116 -p 8001

提示:-a访问服务端密码,-c表示集群模式,指定ip地址和端口号

例如:

1
/usr/local/redis-5.0.2/src/redis-cli -a xxx -c -h 192.168.2.116 -p 8001

注意这里进入到8002了,redirected。

2)进行验证: cluster info(查看集群信息)、cluster nodes(查看节点列表)

3)进行数据操作验证

4)关闭集群则需要逐个进行关闭,使用命令:

1
/usr/local/redis/src/redis-cli -a xxx -c -h 192.168.2.116 -p 8001 shutdown

3. 设置开机自启

1
vim /etc/init.d/redis

将如下代码粘贴进去:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
#!/src/sh
# chkconfig: 2345 80 90
#
# Simple Redis init.d script conceived to work on Linux systems
# as it does use of the /proc filesystem.

REDISPORT1=8001
REDISPORT2=8002
REDISPORT3=8003
REDISPORT4=8004
REDISPORT5=8005
REDISPORT6=8006
EXEC=/usr/local/redis-5.0.7/src/redis-server
CLIEXEC=/usr/local/redis-5.0.7/src/redis-cli

PIDFILE=/var/run/redis_${REDISPORT1}.pid

CONF1="/usr/local/redis-cluster/${REDISPORT1}/redis.conf"
CONF2="/usr/local/redis-cluster/${REDISPORT2}/redis.conf"
CONF3="/usr/local/redis-cluster/${REDISPORT3}/redis.conf"
CONF4="/usr/local/redis-cluster/${REDISPORT4}/redis.conf"
CONF5="/usr/local/redis-cluster/${REDISPORT5}/redis.conf"
CONF6="/usr/local/redis-cluster/${REDISPORT6}/redis.conf"

case "$1" in
start)
if [ -f $PIDFILE ]
then
echo "$PIDFILE exists, process is already running or crashed"
else
echo "Starting Redis cluster server..."
$EXEC $CONF1 &
$EXEC $CONF2 &
$EXEC $CONF3 &
$EXEC $CONF4 &
$EXEC $CONF5 &
$EXEC $CONF6 &
echo "启动成功..."
fi
;;
stop)
if [ ! -f $PIDFILE ]
then
echo "$PIDFILE does not exist, process is not running"
else
PID=$(cat $PIDFILE)
echo "Stopping ..."
$CLIEXEC -p $REDISPORT1 shutdown
$CLIEXEC -p $REDISPORT2 shutdown
$CLIEXEC -p $REDISPORT3 shutdown
$CLIEXEC -p $REDISPORT4 shutdown
$CLIEXEC -p $REDISPORT5 shutdown
$CLIEXEC -p $REDISPORT6 shutdown
while [ -x /proc/${PID} ]
do
echo "Waiting for Redis cluster to shutdown ..."
sleep 1
done
echo "Redis cluster stopped"
fi
;;
*)
echo "Please use start or stop as first argument"
;;
esac

添加权限

1
chmod +x /etc/init.d/redis

加入开机启动服务

1
chkconfig --add redis

使用命令进行开启或关闭redis集群

1
2
service redis start 
service redis stop

原文连接

https://blog.csdn.net/qq_37859539/article/details/83715803