Redis Cluster搭建高可用Redis服务器集群

时间:2022-09-01 09:44:32

一、Redis Cluster集群简介

Redis Cluster是Redis官方提供的分布式解决方案,在3.0版本后推出的,有效地解决了Redis分布式的需求,当一个节点挂了可以快速的切换到另一个节点,当遇到单机内存、并发等瓶颈时,可以采用分布式方案要解决问题。

二、集群原理

Redis Cluster搭建高可用Redis服务器集群
 

Redis Cluster架构图

Redis Cluster集群采用了P2P的模式,完全去中心化,Redis把所有的Key分成了16384个slot,每个Redis实例负责其中一部分slot,集群中的所有信息(节点、端口、slot等),都通过节点之间定期的数据交换而更新,Redis客户端可以在任意一个Redis实例发出请求,如果所需数据不在该实例中,通过重定向命令引导客户端访问所需的实例。

其结构特点:

  • 所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽。
  • 节点的fail是通过集群中超过半数的节点检测失效时才生效。
  • 客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可。
  • redis-cluster把所有的物理节点映射到[0-16383]slot上(不一定是平均分配),cluster负责维护node<->slot<->value。
  • Redis集群预分好16384个桶,当需要在Redis集群中放置一个key-value 时,根据CRC16(key) mod 16384的值,决定将一个key放到哪个桶中。

三、集群搭建

要让集群正常工作至少需要3个主节点,一共就需要6个节点,其中3个为主节点,3个为从节点,为了简单在下面在一台机器上演示,演示使用了linux服务器上7000到7005的6个端口。

下载redis、解压、安装

wget http://download.redis.io/releases/redis-3.2.4.tar.gz

tar -zxvf redis-3.2.4.tar.gz

cd redis-3.2.4/

make&&makeinstall

将redis-trib.rb复制到/usr/local/bin目录下

cd src

cp redis-trib.rb /usr/local/bin

创建Redis节点并修改配置文件

mkdir redis_cluster

cd redis_cluster/

mkdir 7000 7001 7002 7003 7004 7005

cp redis.conf redis_cluster/7000

cp redis.conf redis_cluster/7001

cp redis.conf redis_cluster/7002

cp redis.conf redis_cluster/7003

cp redis.conf redis_cluster/7004

cp redis.conf redis_cluster/7005

按下面提示修改6个配置文件

port7000//端口7000,7001,7002...        

bind 本机ip//默认ip为127.0.0.1 需要改为其他节点机器可访问的ip 否则创建集群时无法访问对应的端口,无法创建集群

daemonize    yes//redis后台运行

pidfile  /var/run/redis_7000.pid//pidfile文件对应7000,7001,7002

cluster-enabled  yes//开启集群  把注释#去掉

cluster-config-filenodes.conf//集群的配置  配置文件首次启动自动生成

cluster-node-timeout15000//请求超时  默认15秒,可自行设置

appendonly  yes//aof日志开启  有需要就开启,它会每次写操作都记录一条日志 

dir /root/redis-3.2.4/redis_cluster/7000//目录,端口7000,7001,7002... ,必须配置,否则无法启动   

启动6个Redis实例,并且要指定配置文件,这些配置文件分别在各自的子目录下面

./src/redis-serverredis_cluster/7000/redis.conf

./src/redis-serverredis_cluster/7001/redis.conf

./src/redis-serverredis_cluster/7002/redis.conf

./src/redis-serverredis_cluster/7003/redis.conf

./src/redis-serverredis_cluster/7004/redis.conf

./src/redis-serverredis_cluster/7005/redis.conf

安装ruby

yuminstallruby

yuminstall-y rubygems

geminstallredis -v3.2.2

使用redis-trib.rb创建集群

cd /usr/local/bin

./redis-trib.rb create --replicas 1 192.168.0.204:7000 192.168.0.204:7001 192.168.0.204:7002 192.168.0.204:7003 192.168.0.204:7004 192.168.0.204:7005

运行结果如下:

Redis Cluster搭建高可用Redis服务器集群
 

Redis Cluster启动成功截图

如果一切顺利,你会看到类似截图上的消息: [OK] All 16384 slots covered, 这说明Redis的Cluster集群环境搭建成功。

简单解释一下这个命令:调用 ruby 命令来进行创建集群,--replicas 1 表示主从节点比例为 1:1,即一个主节点对应一个从节点;然后,默认给我们分配好了每个主节点和对应从节点服务,以及solt的大小,因为在Redis集群中有且仅有16383个solt,默认情况会给我们平均分配,当然你可以指定,后续的增减节点也可以重新分配。

M: 5237fa04bd793832b605d92ceb1d2f493da22e43 为主节点Id

S: b6b696c11bbffa8f9d4e6397ef4d27b0b54fea32 192.168.0.204:7003 replicates 5237fa04bd793832b605d92ceb1d2f493da22e43 从节点下对应主节点Id

目前来看,7000-7002 为主节点,7003-7005 为从节点,并向你确认是否同意这么配置,输入yes后,会开始集群创建。

四、验证集群

通过Cluster Nodes命令和Cluster Info命令来看看集群效果

./redis-cli -c  -h 192.168.0.204 -p 7001

cluster info

cluster nodes

运行结果如下:

Redis Cluster搭建高可用Redis服务器集群
 

运行成功截图

在集群上通过增加数据来测试集群效果

运行结果如下:

Redis Cluster搭建高可用Redis服务器集群
 

限时领取免费Java相关资料,涵盖了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo/Kafka、Hadoop、Hbase、Flink等高并发分布式、大数据、机器学习等技术。

资料传送门:https://mp.weixin.qq.com/s/u2b_NVNuMuAPE0w4lc45fw

关注下方公众号即可免费领取:

Redis Cluster搭建高可用Redis服务器集群

Redis Cluster搭建高可用Redis服务器集群的更多相关文章

  1. keepalived工作原理和配置说明 腾讯云VPC内通过keepalived搭建高可用主备集群

    keepalived工作原理和配置说明 腾讯云VPC内通过keepalived搭建高可用主备集群 内网路由都用mac地址 一个mac地址绑定多个ip一个网卡只能一个mac地址,而且mac地址无法改,但 ...

  2. 手动搭建高可用的kubernetes 集群

    之前按照和我一步步部署 kubernetes 集群的步骤一步一步的成功的使用二进制的方式安装了kubernetes集群,在该文档的基础上重新部署了最新的v1.8.2版本,实现了kube-apiserv ...

  3. 快速掌握RabbitMQ&lpar;五&rpar;——搭建高可用的RabbitMQ集群

    RabbitMQ的集群是依赖erlang集群的,而erlang集群是通过.erlang.cookie文件进行通信认证的,所以我们使用RabbitMQ集群时只需要配置一下.erlang.cookie文件 ...

  4. 搭建高可用的rabbitmq集群 &plus; Mirror Queue &plus; 使用C&num;驱动连接

    我们知道rabbitmq是一个专业的MQ产品,而且它也是一个严格遵守AMQP协议的玩意,但是要想骚,一定需要拿出高可用的东西出来,这不本篇就跟大家说 一下cluster的概念,rabbitmq是erl ...

  5. 搭建高可用的MongoDB集群

    http://www.csdn.net/article/2014-04-09/2819221-build-high-avialable-mongodb-cluster-part-1/1 在大数据的时代 ...

  6. MyCAT&plus;MySQL搭建高可用企业级数据库集群视频课程

    原文地址:https://www.guangboyuan.cn/mycatmysql%E6%90%AD%E5%BB%BA%E9%AB%98%E5%8F%AF%E7%94%A8%E4%BC%81%E4% ...

  7. MyCAT&plus;MySQL 搭建高可用企业级数据库集群——第2章 MyCat入门

    2-1 章节综述 2-2 什么是MyCat 2-3 什么是数据库中间层 2-4 MyCat的主要作用 2-5 MyCat基本元素 2-6 MyCat的安装 2-1 章节综述 1.掌握Mycat的基础概 ...

  8. MyCAT&plus;MySQL 搭建高可用企业级数据库集群——第3章 MyCat核心配置讲解

    3-1 章节综述 3-2 常用配置文件间的关系 3-3 server.xml配置详解 3-4 log4j2.xml配置文件 3-5 rule.xml 3-6 常用分片算法(上) 3-7 常用分片算法( ...

  9. Nginx&plus;Keepalived搭建高可用负载均衡集群

    本文的重点是Keepalived的配置,Nginx的配置就简略带过.软件:CentOS 7.2 / Nginx 1.12.2 / Keepalived 1.3.9 ha-01:192.168.1.97 ...

随机推荐

  1. 工作中那些提高你效率的神器&lpar;第二篇&rpar;&lowbar;Listary

    引言 无论是工作还是科研,我们都希望工作既快又好,然而大多数时候却迷失在繁杂的重复劳动中,久久无法摆脱繁杂的事情. 你是不是曾有这样一种想法:如果我有哆啦A梦的口袋,只要拿出神奇道具就可解当下棘手的问 ...

  2. mongodb的用户管理及安全认证

    1.确认mongodb的版本 > use admin switched to db admin > db.runCommand({}) { "version" : &q ...

  3. 报错&colon;对象必须实现 IConvertible&semi;以分隔符进行分割链接concat&lowbar;ws的使用方法&semi;mysql数据类型转换cast&comma;convert

    错误故障,mysql  服务器上用 concat_ws 函数,连接了一串数字,最后 服务器返回的字段就变成了一个 byte ,而我们想要的类型是  string 类型,那么转换的时候,就报错了. 正确 ...

  4. 【转】Android编译系统详解&lpar;三&rpar;——编译流程详解

    原文网址:http://www.cloudchou.com/android/post-276.html 本文原创作者:Cloud Chou. 欢迎转载,请注明出处和本文链接 1.概述 编译Androi ...

  5. UVA 10041 &lpar;13&period;08&period;25&rpar;

     Problem C: Vito's family  Background The world-known gangster Vito Deadstone is moving to New York. ...

  6. JS跨域请求 JSONP B&sol;S全代码

    Ajax直接请求普通文件存在跨域无权限访问的问题,甭管你是静态页面.动态网页.web服务.WCF,只要是跨域请求,一律不准:Web页面上调用js文件时则不受是否跨域的影响(不仅如此,我们还发现凡是拥有 ...

  7. 漫谈程序员&lpar;十八&rpar;windows中的命令subst

    漫谈程序员(十八)windows中的命令subst 用法格式 一.subst [盘符] [路径]  将指定的路径替代盘符,该路径将作为驱动器使用 二.subst /d 解除替代 三.不加任何参数键入  ...

  8. JetBrains 系列编译器 破解(idea,webstrom ,pycharm等)

    第一步: 下载安装好Idea 或者Pychar ,安装好后不可运行 第二步: 安装完成之后不要立即运行,以下提供JetbrainsCrack的jar包来破解: jar包资源自行百度 下载之后,把Jet ...

  9. Beautiful用法总结

    一.安装 通过命令:pip3 install Beautifulsoup4: 安装后运行:from bs4 import BeautifulSoup,没有报错,说明安装正常: 二.解析库 Beauti ...

  10. Windows 主机名映射地址

    在开发中大数据集群中我们自己的电脑主机名映射不到集群的主机名下面我们就去修改自己电脑 主机名映射地址 c/Windows/System32/drivers/etc/host   文件将主机名和IP地址 ...