Redis主从、sentinel故障自动切换

一、什么是redis主从复制?

主从复制,当用户往Master端写入数据时,通过Redis Sync机制将数据文件发送至Slave,Slave也会执行相同的操作确保数据一致;且实现Redis的主从复制非常简单。

二、redis主从复制特点

1、同一个Master可以拥有多个Slaves。

2、Master下的Slave还可以接受同一架构中其它slave的链接与同步请求,实现数据的级联复制,即Master->Slave->Slave模式;

3、Master以非阻塞的方式同步数据至slave,这将意味着Master会继续处理一个或多个slave的读写请求;

4、Slave端同步数据也可以修改为非阻塞是的方式,当slave在执行新的同步时,它仍可以用旧的数据信息来提供查询;否则,当slave与master失去联系时,slave会返回一个错误给客户端;

5、主从复制具有可扩展性,即多个slave专门提供只读查询与数据的冗余,Master端专门提供写操作;

6、通过配置禁用Master数据持久化机制,将其数据持久化操作交给Slaves完成,避免在Master中要有独立的进程来完成此操作。

三、redis主从复制原理

当启动一个Slave进程后,它会向Master发送一个SYNC Command,请求同步连接。无论是第一次连接还是重新连接,Master都会启动一个后台进程,将数据快照保存到数据文件中,同时Master会记录所有修改数据的命令并缓存在数据文件中。后台进程完成缓存操作后,Master就发送数据文件给Slave,Slave端将数据文件保存到硬盘上,然后将其在加载到内存中,接着Master就会所有修改数据的操作,将其发送给Slave端。若Slave出现故障导致宕机,恢复正常后会自动重新连接,Master收到Slave的连接后,将其完整的数据文件发送给Slave,如果Mater同时收到多个Slave发来的同步请求,Master只会在后台启动一个进程保存数据文件,然后将其发送给所有的Slave,确保Slave正常。

四、配置过程

Jemalloc安装

#yum install -y tcl gcc gcc-c++  make bzip2

#wgethttp://www.canonware.com/download/jemalloc/jemalloc-4.2.0.tar.bz2

#tar -xjf jemalloc-4.2.0.tar.bz2

#cd jemalloc-4.2.0

#./configure --prefix=/usr/local/jemalloc --libdir=/usr/local/lib

#make && make install

#make clean

#echo "/usr/local/lib" >/etc/ld.so.conf.d/usr_local_lib.conf

#/sbin/ldconfig

Redis安装

#cd ../

#wgethttp://download.redis.io/releases/redis-3.2.0.tar.gz

#cd redis-3.2.0

#make MALLOC=jemalloc

#make install

#cd utils/

#./install_server.sh

安装配置和数据路径可以定义:

Selected config:

Port           :6379

Config file    : /etc/redis/6379.conf

Log file       :/var/log/redis_6379.log

Data dir       : /data/redis

Executable     : /usr/local/bin/redis-server

Cli Executable : /usr/local/bin/redis-cli

Is this ok? Then press ENTER to go on or Ctrl-C to abort.

Copied /tmp/6379.conf =>/etc/init.d/redis_6379

Redis设置内存大小

打开redis配置文件

#vim /etc/redis/6379.conf

增加如下两行

maxmemory 12g

maxmemory-policy volatile-lru

第一行:Redis设置最大占用内存,一般推荐Redis设置内存为最大物理内存的四分之三。

第二行:如果设置了maxmemory,一般都要设置过期策略。

Redis有六种过期策略:

1、volatile-lru ->根据LRU算法生成的过期时间来删除。

2、allkeys-lru ->根据LRU算法删除任何key。

3、volatile-random->根据过期设置来随机删除key。

4、allkeys->random->无差别随机删。

5、volatile-ttl ->根据最近过期时间来删除(辅以TTL)

6、noeviction ->谁也不删,直接在写操作时返回错误。

配置完成重启redis

查看配置是否生效

#redis-cli info

主从

192.168.1.76主

192.168.1.77从

两台分别安装redis

安装好之后,在从192.168.1.77的redis配置文件修改bind并增加一行参数

#vim /etc/redis/6379.conf

bind 0.0.0.0

slaveof 192.168.1.76  6379

启动两台redis

在主192.168.1.76执行

#redis-cli

>set name ceshi

>get name

在从192.168.1.77执行

#redis-cli

>get name

如果可以get到ceshi,代表主从成功

Sentinel哨兵:

在其中一台redis上或者随便找一台服务器安装,如果只安装一个sentinel并要安装在redis服务器上,建议在从上搭建sentinel,这样保证了主宕机之后不会影响主从切换,从宕机不会影响主的运行

#vim /etc/redis/sentinel.conf

port 26379

daemonize yes

sentinel monitor mymaster 192.168.1.76 6379 1

sentinel down-after-milliseconds mymaster 30000

sentinel parallel-syncs mymaster 1

sentinel failover-timeout mymaster 900000

logfile "/var/log/sentinel.log"

注释:

第一行:指定sentinel端口号

第二行:指定sentinel为后台启动

第三行:指定sentinel去监视一个名为mymaster的Master,Master的IP地址为192.168.1.76,

端口为6379,最后的1表示当有1个Sentinel检测到Master异常时会判定其失效,如果为2,即只有当2个Sentinel都判定Master失效了才会自动迁移,如果Sentinel的数量不达标,则不会执行自动故障迁移。

第四行:指定Sentinel判定Master断线的时间。(单位为毫秒,判定为主观下线SDOWN)

第五行:指定在执行故障转移时,最多可以有多少个Slave同时对新的Master进行同步。这个数字设置为1,虽然完成故障转移所需的时间会变长,但是可以保证每次只有1个Slave处于不能处理命令请求的状态。

第六行:如果在该时间(ms)内未能完成failover(即故障时master/slave自动切换

)操作,则认为该failover失败。

第七行:指定Sentinel日志文件。

启动

#redis-sentinel /etc/redis/sentinel.conf

测试:

使用如下命令查看

#redis-cli -h 192.168.1.76 -p 6379 info

将主192.168.1.76的redis停掉,会发现从192.168.1.77切换为主了

将主192.168.1.76的redis启动,会发现自动添加为从服务器了

Redis数据迁移

1、在旧redis执行redis-clisave将数据保存到磁盘文件dump.rdb

2、停止新redis

3、将旧的redis保存后的磁盘文件dump.rdb拷贝到新的redis数据目录下

4、启动新的redis

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,847评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,208评论 1 292
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,587评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,942评论 0 205
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,332评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,587评论 1 218
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,853评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,568评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,273评论 1 242
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,542评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,033评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,373评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,031评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,073评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,830评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,628评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,537评论 2 269

推荐阅读更多精彩内容