Redis主从集群+哨兵搭建实战

背景

当请求量逐渐变大，单机Redis可能撑不住请求的时候就要考虑将Redis做集群，入门级别的Redis集群就是主从集群，利用读写分离的特性提供高可用，引入新的技术就会带来新的问题，当然引入集群也是有很多坏处的，比如

业务逻辑变复杂，需要读写分离和负载均衡（redis代理解决）
网络复杂，有可能节点之间由于网络不可达产生分区风险（CAP理论）
一主多从，主宕机集群部分不可用（哨兵模式解决）
需要更多硬件资源支持（废话）

当然带来的这些问题就有相应的解决方案，下面一步一步带你入坑。

主从集群搭建

环境准备

docker run -dit  --name r2 --privileged centos /usr/sbin/init
docker run -dit  --name r3 --privileged centos /usr/sbin/init
docker run -dit  --name r4 --privileged centos /usr/sbin/init

它们的IP分别如下，我们的规划是r2作为主，其余为从

r2 172.17.0.2 # 主
r3 172.17.0.3 # 从
r4 172.17.0.4 # 从

docker查看容器ip的命令为

docker inspect --format '{
  { .NetworkSettings.IPAddress }}'  r2

安装Redis

进入容器命令docker exec -it r2 bash

每台分别安装Redis，采用源码编译安装的方式，安装版本为5.0.5，可自定义

REDIS_VERSION=5.0.5
# 编译环境安装和一些常用工具
yum install -y wget gcc make telnet
# 创建文件夹
cd ~ && mkdir soft && cd soft
# 下载软件
wget http://download.redis.io/releases/redis-$REDIS_VERSION.tar.gz
# 解压
tar xf redis-$REDIS_VERSION.tar.gz && cd redis-$REDIS_VERSION
# 看README.md 执行出错看缺什么就先装什么，装完之后clean一下(make distclean)再次make 
# 生产环境做好执行一下测试 make test
# 可以查看一下生成的可执行程序xxx.o ls -lh src 
make
# 安装
make install PREFIX=/opt/redis$REDIS_VERSION
# 添加环境变量
cat >> /etc/profile <<EOF
export REDIS_HOME=/opt/redis$REDIS_VERSION
export PATH=$PATH:\$REDIS_HOME/bin
EOF
echo  'source /etc/profile' >> ~/.bashrc && source ~/.bashrc
cd utils
# 可以执行—次或多次，需要手动确定参数
# a)一个物理机中可以有多个redis实例(进程)，通过port区分
# b)可执行程序就一份在目录，但是内存中未来的多个实例需要各自的配置文件，持久化目录等资源
# c) service redis_6379 start/stop/stauts>linux /etc/init.d/****
# d)脚本还会帮你启动!
./install_server.sh
ps -fe | grep redis

更改配置文件中的ip

sed -i 's/bind 127.0.0.1/bind 0.0.0.0/g'  /etc/redis/6379.conf

配置文件位置在/etc/redis/6379.conf，如果要在内网访问，需要修改配置文件的bind 127.0.0.1中的ip为0.0.0.0，意为允许任何连接，否则在局域网中是连不上的，这也是用docker进行网络隔离的好处，可以更贴合生产环境，发现更多问题。

设置非守护进程，让redis在前台阻塞运行，测试时方便观察输出，当然生产环境中不建议关闭

# 关闭守护进程
sed -i 's/daemonize yes/daemonize no/g'  /etc/redis/6379.conf

# 关掉日志
# logfile /var/log/redis_6379.log
sed -i 's|logfile /var/log/redis_6379.log|#logfile /var/log/redis_6379.log|g'  /etc/redis/6379.conf

重启下redis

# -15优雅的杀掉
kill -15 `ps aux | grep -v grep | grep redis | awk '{ print $2 }'`
# 重启
redis-server /etc/redis/6379.conf

客户端连接，新开shell窗口连接一下看看是否能连接成功

# 查看帮助
redis-cli -h
# 指定主机端口连接
redis-cli -h 127.0.0.1 -p 6379

启动主从集群

上一步每台都安装了redis并且验证了可以启动，那么现在来设置主从集群启动，172.17.0.2为主，可以不用管它，172.17.0.3和172.17.0.4是从，启动的时候需要用replicaof命令指定是从172.17.0.2的复制，在3和4上分别执行如下命令即可

redis-server  /etc/redis/6379.conf --replicaof 172.17.0.2 6379

看到输出如下，说明从机已经连上主机了，随时准备接受请求

... * Connecting to MASTER 172.17.0.2:6379
... * MASTER <-> REPLICA sync started
... * Non blocking connect for SYNC fired the event.
... * Master replied to PING, replication can continue...
... * Partial resynchronization not possible (no cached master)
... * Full resync from master: 3c1b294dd75b88d62a9f6be85593b51264f68970:0
... * MASTER <-> REPLICA sync: receiving 175 bytes from master
... * MASTER <-> REPLICA sync: Flushing old data
... * MASTER <-> REPLICA sync: Loading DB in memory
... * MASTER <-> REPLICA sync: Finished with success

测试

首先，在主上设置一个键，在从上试试能否获取即可

# 主
set k1 aaa
# 从
get k1

如下图，发现主设置值之后从也有值，主删除之后从也获取不到了，说明我们的主从集群搭建成功！