Redis主从集群搭建

redis安装

redis版本:redis-5.0.3.tar.gz
操作系统:完全新安装的centos7.6系统
使用一台虚拟机模拟6个redis节点,3个master,3个slave,虚拟机IP为120.27.16.18和使用不同的IP创建集群基本过程一致,为了方便,就不创建多个虚拟机了。
开始搭建:

yum install -y wget gcc
systemctl stop firewalld.service
systemctl disable firewalld.service
cd /opt
wget http://download.redis.io/releases/redis-5.0.3.tar.gz
tar zxvf redis-5.0.3.tar.gz
mv redis-5.0.3 redis
cd redis

解压后目录结构如下:

make MALLOC=libc 
make instal

src目录包含了redis server和redis cli的相关命令脚本,将该路径加入到PATH环境变量当中,方便使用

配置文件

1.复制8个redis.conf文件到redis7000-7007中
cp /usr/local/myredis/redis/redis.conf  ./redis7000/redis.conf
2.修改redis.conf中的参数
    1. bind 参数
#本机的ip
bind 120.27.16.18
  • 2.保护模式不需要关闭
protected-mode yes
  • 3.端口号修改
port 7000
  • 4.以后台方式启动
daemonize yes
  • 5.搭建伪集群方式需要修改端口号(真正集群不需要改)
pidfile /var/run/redis_7000.pid
  • 6.redis的日志存储位置
  logfile " /usr/local/myredis/redis7000/redis.log"
  • 7.rdb持久化文件存储位置
dir /myredis/redis7000
  • 8.设置redis主节点密码(集群主节点密码和redis密码相同)
masterauth 123456
  • 9.设置redis密码(集群主节点密码和redis密码相同)
requirepass 123456
集群需要修改redis.conf的配置
  • 1.是否已集群方式运行,必须设置槽位才能写入数据
cluster-enabled yes
  • 2.集群信息的存放位置(正式集群不需要修改)
cluster-config-file nodes-6379.conf
  • 3.当前的节点挂掉了,没有从节点前提下,集群是否还能使用,不开启集群不能使用,开启可能造成集群数据丢失,可用性降低。
cluster-require-full-coverage yes
复制redis7000的配置文件

将redis7000的redis.conf复制成redis7001.conf文件并将redis7000中的redis.conf的端口号改成7001存储;

sed 's/7000/7001/g' redis7000/redis.conf > redis7001/redis.conf
sed 's/7000/7002/g' redis7000/redis.conf > redis7002/redis.conf
sed 's/7000/7003/g' redis7000/redis.conf > redis7003/redis.conf
sed 's/7000/7004/g' redis7000/redis.conf > redis7004/redis.conf
sed 's/7000/7005/g' redis7000/redis.conf > redis7005/redis.conf
sed 's/7000/7006/g' redis7000/redis.conf > redis7006/redis.conf
sed 's/7000/7007/g' redis7000/redis.conf > redis7007/redis.conf
启动redis各个节点
/usr/local/bin/redis-server ./redis7000/redis.conf 
/usr/local/bin/redis-server ./redis7001/redis.conf 
/usr/local/bin/redis-server ./redis7002/redis.conf 
/usr/local/bin/redis-server ./redis7003/redis.conf 
/usr/local/bin/redis-server ./redis7004/redis.conf 
/usr/local/bin/redis-server ./redis7005/redis.conf 
/usr/local/bin/redis-server ./redis7006/redis.conf 
/usr/local/bin/redis-server ./redis7007/redis.conf
查看redis启动状态
ps -ef | grep redis
连接redis集群节点客户端
/usr/local/bin/redis-cli -h 120.27.16.18  -p 7000 -a 123456

查看集群节点分配

cluster nodes

退出当前集群

exit

集群api帮助文档

/usr/local/bin/redis-cli -h 120.27.16.18  -p 7000 -a 123456 --cluster help
Cluster Manager Commands:
  create         host1:port1 ... hostN:portN
                 --cluster-replicas <arg>
  check          host:port
                 --cluster-search-multiple-owners
  info           host:port
  fix            host:port
                 --cluster-search-multiple-owners
  reshard        host:port
                 --cluster-from <arg>
                 --cluster-to <arg>
                 --cluster-slots <arg>
                 --cluster-yes
                 --cluster-timeout <arg>
                 --cluster-pipeline <arg>
                 --cluster-replace
  rebalance      host:port
                 --cluster-weight <node1=w1...nodeN=wN>
                 --cluster-use-empty-masters
                 --cluster-timeout <arg>
                 --cluster-simulate
                 --cluster-pipeline <arg>
                 --cluster-threshold <arg>
                 --cluster-replace
  add-node       new_host:new_port existing_host:existing_port
                 --cluster-slave
                 --cluster-master-id <arg>
  del-node       host:port node_id
  call           host:port command arg arg .. arg
  set-timeout    host:port milliseconds
  import         host:port
                 --cluster-from <arg>
                 --cluster-copy
                 --cluster-replace
  help           

For check, fix, reshard, del-node, set-timeout you can specify the host and port of any working node in the cluster.

分配槽位

搭建redis集群

/usr/local/bin/redis-cli --cluster create 172.31.186.94:7000 172.31.186.94:7001 172.31.186.94:7002 172.31.186.94:7003 172.31.186.94:7004 172.31.186.94:7005 --cluster-replicas 1 -a "123456"


yes

查看节点信息

/usr/local/bin/redis-cli -h 120.27.16.18  -p 7000 -a 123456 cluster nodes

7004是7000的从节点,随机分配;

测试设置值



报错提示:这个set 值属于15495的槽位上,现在连接的是7000,所以报错;

通过crc16算法


在通过cluster keyslot k2 命令计算key值的槽位

以集群方式连接,可以自动重定向到对应槽位上;

 /usr/local/bin/redis-cli -h 120.27.16.18  -p 7000 -a 123456 -c

添加节点

/usr/local/bin/redis-cli --cluster add-node 172.31.186.94:7006 172.31.186.94:7003 -a 123456

添加从节点

/usr/local/bin/redis-cli --cluster add-node 172.31.186.94:7007 172.31.186.94:7000 --cluster-slave --cluster-master-id 58f2ba3f4716d19163c65afecdffbc67a88ec0fd -a 123456

58f2ba3f4716d19163c65afecdffbc67a88ec0fd 绑到哪个主节点的id

分配槽位

先连接到7000集群

/usr/local/bin/redis-cli --cluster reshard 172.31.186.94:7000 -a 123456

分配出去多少槽位-300
指定哪个集群节点接收者300槽位

  • all 所有主节点平均分配
  • 或者指定某一个id分配这个节点
  • done 结束分配
    注意:槽位分配过去,数据也会转移

当7006主节点挂了,7007会自动设置成主节点;
槽位只有主节点有;

集群缩容

下线迁移槽
语法:redis-cli --cluster reshard 已存在节点ip 端口 --cluster-from 要迁出节点ID --cluster-to 接收槽节点ID --cluster-slots 迁出槽数量

/usr/local/bin/redis-cli --cluster reshard 172.31.186.94:7000 --cluster-from 58f2ba3f4716d19163c65afecdffbc67a88ec0fd  --cluster-to 03f2e13a5907ce997a5ef24b894dc32ea75995a9 --cluster-slots 300 -a 123456

忘记节点.关闭节点,先删除主节点再删从节点
语法: redis-cli --cluster del-node 已存在节点IP:端口 要删除的节点ID

//7006节点   
 redis-cli --cluster del-node 172.31.186.94:7000 58f2ba3f4716d19163c65afecdffbc67a88ec0fd -a 123456

//7007节点   
 redis-cli --cluster del-node 172.31.186.94:7000 bab18a4ad96051e6b15d3a4fc76d9985180fcf7f  -a 123456

删除节点

del-node host:port node_id

/usr/local/bin/redis-cli --cluster del-node 172.31.186.94:7007 node_id ffee6f270b3025e01594a23e79f2d3c837e92b7f

推荐阅读更多精彩内容