redis 部署哨兵、cluster 集群

本贴最后更新于 1918 天前,其中的信息可能已经时移世异

生产环境,如果你是单机在线上跑的话,那么风险很大,一般情况下都会使用一主多从的架构,这样你的系统的可用性才能达到 4 个 9 。

今天来讲讲如何部署读写分离架构,以及读写分离如何保证高可用?

假设你已经部署了 2 个 redis,如果不知道怎么安装部署,可以看看这篇文章:redis 生产环境安装

选择其中一个 redis 节点,作为 slave 节点,需要修改 redis.conf 文件;找到 slaveof 属性,设置 master 的 ip 和端口,这样主从架构就配置好了。
配置如下:

slaveof master-ip 6379

bind 当前机器的ip地址

slave-read-only yes

masterauth xxxx  #注意:如果你master设置了requirepass,那么slave中需要配置下面这个配置

配置完之后,使用“redis-cli -h ip -p 6379 -a 你的密码”连上去,输入:info,可以看到主从配置信息
imagepng
这个 redis 的 role 是 master。

imagepng
这个 redis 的 role 是 slave。

也可以使用 slaveof 命令,
imagepng
关闭 slave
imagepng
利用『 SLAVEOF NO ONE 不会丢弃同步所得数据集』这个特性,可以在主服务器失败的时候,将从属服务器用作新的主服务器,从而实现无间断运行。

到此主从架构的配置就好了。
但是如果某些原因,master 挂了,那么需要手动来把 slave 变成 master。幸好 redis 提供了 Sentinel(哨兵集群),可以不用人工介入就进行切换。使用该机制才能保证 4 个 9 。

sentinel 配置

首先 cd 到 redis 下面,找到 sentinel.conf 文件,把他 cp 到/etc/sentinal/目录下,并且命名为 5000.conf(表示端口为 5000)
mkdir /etc/sentinal
mkdir -p /var/sentinal/5000
cd /usr/local/redis
cp sentinel.conf /etc/sentinal
mv sentinel.conf 5000.conf

修改 5000.conf 的配置为

port 5000 
dir /var/sentinal/5000 
bind xxxx #指定你的ip地址

sentinel monitor mymaster 你的ip 6379 2  #哨兵监控的master。
quorum的解释:至少多少个哨兵要一致同意,master进程挂掉了,或者slave进程挂掉了,或者要启动一个故障转移操作

sentinel down-after-milliseconds mymaster 30000  #超过多少毫秒跟一个redis实例断了连接,哨兵就可能认为这个redis实例挂了

sentinel failover-timeout mymaster 60000 #若哨兵在配置值内未能完成故障转移操作,则任务本次故障转移失败。

sentinel parallel-syncs mymaster 1 #新的master被切换之后,同时有多少个slave被切换到去连接新master,重新做同步,数字越低,花费的时间越多

protected-mode no #保护模式如果开启只接受回环地址的ipv4和ipv6地址链接,拒绝外部链接,而且正常应该配置多个哨兵,避免一个哨兵出现独裁情况,如果配置多个哨兵那如果开启也会拒绝其他sentinel的连接。导致哨兵配置无法生效。

sentinel auth-pass mymaster redismasterpassword #如果你的redis设置了密码,那么你需要在这里配置密码 

logfile /var/sentina/logs/sentinel.log      #指明日志文件

使用 redis-sentinel /etc/sentinal/5000.conf 来启动哨兵。
看到下面结果,表示哨兵配置成功了。
imagepng

可以使用下面这个命令,连上 sentinal,查看具体信息
redis-cli -h 你的 sentinal-ip -p 你的 sentinal-port

sentinel master mymaster #查看redis master的信息
SENTINEL slaves mymaster #查看redis slave的信息
SENTINEL sentinels mymaster #查看其它的sentinal信息
SENTINEL get-master-addr-by-name mymaster #查看谁是master redis

如果你把 master 关掉,哨兵就会自动帮你切换。
模拟把 master redis 关掉,哨兵切换过程如下图
imagepng
再次查看当前主从架构的 master
imagepng
已经切换为 6380 了(之前的 master 是 6379)

redis cluster 配置

一般配置 3 个 master,每个 master 下面配置一个 salve。这样的配置可以保证系统高可用。如果你想你的更加稳定,那么可以在 master 下面都配置一些 salve。

使用下面命令 创建文件夹
mkdir -p /etc/redis-cluster
mkdir -p /var/log/redis
mkdir -p /var/redis/6379

redis.conf 文件的配置为:

port 6379
cluster-enabled yes
cluster-config-file /etc/redis-cluster/node-6379.conf #这是指定一个文件,供cluster模式下的redis实例将集群状态保存在那里,包括集群中其他机器的信息,比如节点的上线和下限,故障转移。
cluster-node-timeout 15000  #节点存活超时时长,超过一定时长,认为节点宕机,master宕机的话就会触发主备切换,slave宕机就不会提供服务
daemonize	yes							
pidfile		/var/run/redis\_6379.pid 						
dir 		/var/redis/6379
logfile /var/log/redis/6379.log
bind 你的ip地址		
appendonly yes

redis 配置好了之后,就可以启动了

还需要安装 ruby

yum install -y ruby
yum install -y rubygems
gem install -l /home/downloads/redis-3.2.1.gem #去官网 https://rubygems.org/gems/redis 下载相应的.gem 文件,上传到服务器上
cp /usr/local/redis-3.2.8/src/redis-trib.rb /usr/local/bin

使用下面命令来创建集群
redis-trib.rb create --replicas 0 xxx:6379 xxx:6380 xxx:6381

出现了错误:
1、Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0
解决:把 dump.db 数据清除掉。

2、[ERR] Sorry, can't connect to node
解决:因为一个节点我设置了密码,所以导致 redis-trib.rb 连接不上。requirepass 注释掉。

3、ERROR: Invalid configuration for cluster creation.Redis Cluster requires at least 3 master nodes.
解决:因为之前我配置了两个节点,他创建集群必须要 3 个节点,那么在创建一个节点。

如果你看到这个,说明你已经成功配置了 redis cluster
imagepng

  • B3log

    B3log 是一个开源组织,名字来源于“Bulletin Board Blog”缩写,目标是将独立博客与论坛结合,形成一种新的网络社区体验,详细请看 B3log 构思。目前 B3log 已经开源了多款产品:SymSoloVditor思源笔记

    1090 引用 • 3467 回帖 • 297 关注
  • Redis

    Redis 是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库,并提供多种语言的 API。从 2010 年 3 月 15 日起,Redis 的开发工作由 VMware 主持。从 2013 年 5 月开始,Redis 的开发由 Pivotal 赞助。

    284 引用 • 247 回帖 • 212 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
chaigx
欢迎关注我的公众号:程序之声。有些文章没办法同步过来,访问个人博客:http://www.chaiguanxin.com 杭州

推荐标签 标签

  • Quicker

    Quicker 您的指尖工具箱!操作更少,收获更多!

    16 引用 • 68 回帖 • 1 关注
  • V2EX

    V2EX 是创意工作者们的社区。这里目前汇聚了超过 400,000 名主要来自互联网行业、游戏行业和媒体行业的创意工作者。V2EX 希望能够成为创意工作者们的生活和事业的一部分。

    17 引用 • 236 回帖 • 434 关注
  • Sphinx

    Sphinx 是一个基于 SQL 的全文检索引擎,可以结合 MySQL、PostgreSQL 做全文搜索,它可以提供比数据库本身更专业的搜索功能,使得应用程序更容易实现专业化的全文检索。

    1 引用 • 171 关注
  • Love2D

    Love2D 是一个开源的, 跨平台的 2D 游戏引擎。使用纯 Lua 脚本来进行游戏开发。目前支持的平台有 Windows, Mac OS X, Linux, Android 和 iOS。

    14 引用 • 53 回帖 • 506 关注
  • 架构

    我们平时所说的“架构”主要是指软件架构,这是有关软件整体结构与组件的抽象描述,用于指导软件系统各个方面的设计。另外还有“业务架构”、“网络架构”、“硬件架构”等细分领域。

    139 引用 • 441 回帖
  • GitHub

    GitHub 于 2008 年上线,目前,除了 Git 代码仓库托管及基本的 Web 管理界面以外,还提供了订阅、讨论组、文本渲染、在线文件编辑器、协作图谱(报表)、代码片段分享(Gist)等功能。正因为这些功能所提供的便利,又经过长期的积累,GitHub 的用户活跃度很高,在开源世界里享有深远的声望,并形成了社交化编程文化(Social Coding)。

    207 引用 • 2031 回帖
  • CSDN

    CSDN (Chinese Software Developer Network) 创立于 1999 年,是中国的 IT 社区和服务平台,为中国的软件开发者和 IT 从业者提供知识传播、职业发展、软件开发等全生命周期服务,满足他们在职业发展中学习及共享知识和信息、建立职业发展社交圈、通过软件开发实现技术商业化等刚性需求。

    14 引用 • 155 回帖
  • 程序员

    程序员是从事程序开发、程序维护的专业人员。

    529 引用 • 3527 回帖 • 2 关注
  • ZeroNet

    ZeroNet 是一个基于比特币加密技术和 BT 网络技术的去中心化的、开放开源的网络和交流系统。

    1 引用 • 21 回帖 • 592 关注
  • Vue.js

    Vue.js(读音 /vju ː/,类似于 view)是一个构建数据驱动的 Web 界面库。Vue.js 的目标是通过尽可能简单的 API 实现响应的数据绑定和组合的视图组件。

    261 引用 • 662 回帖 • 2 关注
  • BND

    BND(Baidu Netdisk Downloader)是一款图形界面的百度网盘不限速下载器,支持 Windows、Linux 和 Mac,详细介绍请看这里

    107 引用 • 1281 回帖 • 22 关注
  • 负能量

    上帝为你关上了一扇门,然后就去睡觉了....努力不一定能成功,但不努力一定很轻松 (° ー °〃)

    85 引用 • 1192 回帖 • 461 关注
  • OpenResty

    OpenResty 是一个基于 NGINX 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。

    17 引用 • 41 关注
  • MyBatis

    MyBatis 本是 Apache 软件基金会 的一个开源项目 iBatis,2010 年这个项目由 Apache 软件基金会迁移到了 google code,并且改名为 MyBatis ,2013 年 11 月再次迁移到了 GitHub。

    170 引用 • 414 回帖 • 430 关注
  • Kotlin

    Kotlin 是一种在 Java 虚拟机上运行的静态类型编程语言,由 JetBrains 设计开发并开源。Kotlin 可以编译成 Java 字节码,也可以编译成 JavaScript,方便在没有 JVM 的设备上运行。在 Google I/O 2017 中,Google 宣布 Kotlin 成为 Android 官方开发语言。

    19 引用 • 33 回帖 • 20 关注
  • 博客

    记录并分享人生的经历。

    270 引用 • 2386 回帖
  • Vim

    Vim 是类 UNIX 系统文本编辑器 Vi 的加强版本,加入了更多特性来帮助编辑源代码。Vim 的部分增强功能包括文件比较(vimdiff)、语法高亮、全面的帮助系统、本地脚本(Vimscript)和便于选择的可视化模式。

    27 引用 • 66 回帖 • 1 关注
  • PWL

    组织简介

    用爱发电 (Programming With Love) 是一个以开源精神为核心的民间开源爱好者技术组织,“用爱发电”象征开源与贡献精神,加入组织,代表你将遵守组织的“个人开源爱好者”的各项条款。申请加入:用爱发电组织邀请帖
    用爱发电组织官网:https://programmingwithlove.stackoverflow.wiki/

    用爱发电组织的核心驱动力:

    • 遵守开源守则,体现开源&贡献精神:以分享为目的,拒绝非法牟利。
    • 自我保护:使用适当的 License 保护自己的原创作品。
    • 尊重他人:不以各种理由、各种漏洞进行未经允许的抄袭、散播、洩露;以礼相待,尊重所有对社区做出贡献的开发者;通过他人的分享习得知识,要留下足迹,表示感谢。
    • 热爱编程、热爱学习:加入组织,热爱编程是首当其要的。我们欢迎热爱讨论、分享、提问的朋友,也同样欢迎默默成就的朋友。
    • 倾听:正确并恳切对待、处理问题与建议,及时修复开源项目的 Bug ,及时与反馈者沟通。不抬杠、不无视、不辱骂。
    • 平视:不诋毁、轻视、嘲讽其他开发者,主动提出建议、施以帮助,以和谐为本。只要他人肯努力,你也可能会被昔日小看的人所超越,所以请保持谦虚。
    • 乐观且活跃:你的努力决定了你的高度。不要放弃,多年后回头俯瞰,才会发现自己已经成就往日所仰望的水平。积极地将项目开源,帮助他人学习、改进,自己也会获得相应的提升、成就与成就感。
    1 引用 • 487 回帖 • 3 关注
  • WebSocket

    WebSocket 是 HTML5 中定义的一种新协议,它实现了浏览器与服务器之间的全双工通信(full-duplex)。

    48 引用 • 206 回帖 • 408 关注
  • API

    应用程序编程接口(Application Programming Interface)是一些预先定义的函数,目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力,而又无需访问源码,或理解内部工作机制的细节。

    76 引用 • 421 回帖
  • CloudFoundry

    Cloud Foundry 是 VMware 推出的业界第一个开源 PaaS 云平台,它支持多种框架、语言、运行时环境、云平台及应用服务,使开发人员能够在几秒钟内进行应用程序的部署和扩展,无需担心任何基础架构的问题。

    5 引用 • 18 回帖 • 151 关注
  • OkHttp

    OkHttp 是一款 HTTP & HTTP/2 客户端库,专为 Android 和 Java 应用打造。

    16 引用 • 6 回帖 • 56 关注
  • 心情

    心是产生任何想法的源泉,心本体会陷入到对自己本体不能理解的状态中,因为心能产生任何想法,不能分出对错,不能分出自己。

    59 引用 • 369 回帖
  • flomo

    flomo 是新一代 「卡片笔记」 ,专注在碎片化时代,促进你的记录,帮你积累更多知识资产。

    3 引用 • 74 回帖 • 2 关注
  • V2Ray
    1 引用 • 15 回帖
  • 小说

    小说是以刻画人物形象为中心,通过完整的故事情节和环境描写来反映社会生活的文学体裁。

    28 引用 • 108 回帖 • 2 关注
  • JSON

    JSON (JavaScript Object Notation)是一种轻量级的数据交换格式。易于人类阅读和编写。同时也易于机器解析和生成。

    51 引用 • 190 回帖 • 1 关注