Redis-集群 - 三台服务器

合集下载

Redis 集群服务信息与性能指标详解

Redis 集群服务信息与性能指标详解在发现redis集群性能问题的时候，我们⾸首先需要考虑的是整个集群的各项指标数据，然后根据这些指标数据判断具体的问题所在，redis本来就提供了了⼀一套⽐比较完善的性能指标，具体如下：⼀一般情况下， used_memory_rss 的值应该只⽐比 used_memory 稍微⾼高⼀一些。

1、当 rss > used ，且两者的值相差较⼤大时，表示存在（内部或外部的）内存碎⽚片。

内存碎⽚片的⽐比率可以通过查看mem_fragmentation_ratio 得知。

2、当 used > rss 时，表示 Redis 的部分内存被操作系统换出到交换空间了了，在这种情况下，操作可能会产⽣生明显的延迟。

3、当 Redis 释放内存时，分配器器可能会，也可能不不会，将内存返还给操作系统。

如果 Redis 释放了了内存，却没有将内存返还给操作系统，那么used_memory 的值可能和操作系统显示的 Redis 内存占⽤用并不不⼀一致。

查看 used_memory_peak 的值可以验证这种情况是否发⽣生。

Redis Info信息包括：Server,Clients,Memory,Persistence,Stats,Replication,CPU,Commandstats,Cluster,Keyspace# Server(服务器器信息)redis_version:4.0.10 #redis服务器器版本redis_git_sha1I00000000 #Git SHA1redis_git_dirty:0 #Git dirty flagredis_build_id:6c2c390b97607ff0 #redis build idredis_mode:cluster #运⾏行行模式，单机或者集群os:Linux 2.6.32-358.2.1.el6.x86_64 x86_64 #redis服务器器的宿主操作系统arch_bits:64 #架构(32或64位)multiplexing_api:epoll #redis所使⽤用的事件处理理机制gcc_version:4.4.7 #编译redis时所使⽤用的gcc版本process_id:12099 #redis服务器器进程的pidrun_id:63bcd0e57adb695ff0bf873cf42d403ddbac1565 #redis服务器器的随机标识符(⽤用于sentinel和集群)tcp_port:9021 #redis服务器器监听端⼝口uptime_in_seconds:26157730 #redis服务器器启动总时间，单位是秒uptime_in_days:302 #redis服务器器启动总时间，单位是天hz:10 #redis内部调度（进⾏行行关闭timeout的客户端，删除过期key等等）频率，程序规定serverCron每秒运⾏行行10次。

Redis集群Redis-cluster搭建及故障、性能测试

Redis集群Redis-cluster搭建及故障、性能测试⼀、Redis集群部署三台物理机：172.20.0.17、172.20.0.18、172.20.0.19⼆、安装Redis下载安装redis压缩包解压压缩包，进⼊redis-5.0.2⽂件夹，运⾏命令./make install安装redismv redis-5.0.2 /usr/local/redis/三、修改配置⽂件node1--17服务器:1、创建redis_cluster/700X的⽬录mkdir -p /usr/local/redis/redis_cluster/7001mkdir -p /usr/local/redis/redis_cluster/70022、修改Redis.conf的端⼝cp redis.conf /usr/local/redis/redis_cluster/7001修改端⼝为7001cp redis.conf /usr/local/redis/redis_cluster/7002修改端⼝为70023、同时将修改后的Redis.conf复制到另外两个节点（18、19）4、将redis-server复制到节点⽬录下，⽅便操作cp /usr/local/bin/redis-server /usr/local/redis/redis-5.0.2/redis_cluster/7001/5、开启redis-cluster配置，配置做以下改造#配置yes开启redis-clustercluster-enabled yes#配置节点之间超时时间cluster-node-timeout 15000#这个配置很重要，cluster开启必须重命名指定cluster-config-file，不能与别的节点相同，否则会启动失败,最好按主机+端⼝命名cluster-config-file nodes-17-7001.conf四、启动各节点17、18、19Rediscd /usr/local/redis/redis-5.0.2/redis_cluster/7001./redis-server redis.confcd /usr/local/redis/redis-5.0.2/redis_cluster/7002./redis-server redis.conf五、创建集群命令cd /usr/local/bin./redis-cli --cluster create 172.20.0.17:7001 172.20.0.18:7001 172.20.0.19:7001 172.20.0.17:7002 172.20.0.18:7002 172.20.0.19:7002 --cluster-replicas 1（replicas1 表⽰我们希望为集群中的每个主节点创建⼀个从节点。

Redis缓存多机房部署策略

Redis缓存多机房部署策略Redis是一种开源的内存数据存储系统，被广泛用于缓存、消息传递、实时分析等应用场景。

在多机房环境下，如何合理地部署Redis缓存，成为了一个重要的问题。

本文将探讨Redis缓存多机房部署的策略。

在多机房环境下，为了保证用户访问速度和服务的高可用性，需要将Redis缓存部署在各个机房分布式节点上。

常见的部署策略有以下几种：1. 主从复制策略主从复制是Redis的默认配置，适用于小规模的多机房部署。

该策略将一个Redis实例配置为主节点，其他实例配置为从节点。

主节点负责接收写请求并同步到从节点，从节点则用于读请求的负载均衡。

通过设置适当数量的从节点，可以提高读取的吞吐量和服务的可用性。

2. 哨兵模式策略哨兵模式是Redis提供的一种高可用解决方案。

该策略在主从复制的基础上，引入了哨兵节点。

哨兵节点通过监控主节点的状态，当主节点故障时，自动将一个从节点升级为新的主节点，并通知其他从节点更新配置。

这样可以实现自动故障转移，保证服务的高可用性。

在多机房环境下，可以在每个机房都配置一组主从节点和哨兵节点，来实现跨机房的故障转移。

3. 集群模式策略Redis的集群模式是一种分布式解决方案，适用于大规模的多机房部署。

集群模式将多个Redis实例组成一个分布式集群，每个实例负责管理一部分数据。

客户端使用Hash槽对数据进行分片，将数据分散存储在不同的实例上。

这样可以提高整个系统的读写吞吐量和扩展性。

在多机房环境下，可以将不同机房的实例组成多个分布式子集群，通过跨机房的网络来访问和操作数据。

除了以上策略外，还可以结合使用代理、负载均衡和分布式锁等技术，来进一步提高多机房的Redis部署效果。

例如，可以在每个机房设置一个代理节点，用于将请求路由到对应机房的Redis实例。

同时，可以使用负载均衡策略来均衡各个机房之间的请求流量，避免某个机房负载过高或过低。

在并发访问较高的情况下，可以使用分布式锁来保证对数据的互斥访问，避免并发冲突和数据不一致的问题。

redis集群搭建及配置

redis主从服务器搭建修改记录目录redis主从服务器搭建 (1)一.redis主从服务器搭建 (2)第一步：下载redis (2)第二步:解压redis tar包 (2)第三步：进入reidis目录 (2)第四步：make (2)第五步：make install (3)第六步：修改redis.conf 操作 (3)第七步：redis从服务器配置 (4)第八步：修改从服务redis.conf (4)二.redis测试 (4)第一步：编写redis客户端启动shell (4)第二步：启动客户端 (5)第三步：操作 (5)第四步:set name test (5)第五步:get name (5)第六步:从服务器端启动客户端 (5)第七步:从服务器端(10.105.76.100) get name (5)三.sentinel配置及启动 (5)第一步：修改sentinel.conf (6)第二步启动sentinel (6)第三步：启动sentinel (6)一.redis主从服务器搭建第一步：下载redis在redis官网下载redis2.8.17版本第二步:解压redis tar包将下载的redis-2.8.17.tar.gz放在10.105.76.99（主服务器)上/usr/local下然后解压tar包命令：tar -zxvf redis-2.8.17.tar.gz第三步：进入reidis目录进入redis-2.8.17目录命令: cd redis-2.8.17第四步：makemake 或者make MALLOC=libc 如果使用make时报错（zmalloc.h:50:31: error: jemalloc/jemalloc.h: No such file or directory）此时可使用make MALLOC=libc出现下图说明make完成第五步：make install第六步：修改redis.conf 操作进入redis安装目录cd /usr/local/redis-2.8.17，vi redis.conf将daemonize no改为yes ，意思是在后台运行logfile改为log的存放路径requirepass 前面的#去掉后面改为itmiredis此处为密码前六步已经完成了redis主端的安装及配置，如果需要可以写一个启动redis的shell脚本，touch start.sh,vi start.sh 里面的内容为src/redis-server redis.conf第七步：redis从服务器配置将安装好的redis拷贝到从服务器(10.105.76.100) 命令scp -r /usr/local/redis-2.8.17root@10.105.76.100:/usr/local第八步：修改从服务redis.conf拷贝完成后进入从服务器(10.105.76.100) ,cd /usr/local/redis-2.8.17,修改redis.confslaveof ip(10.105.76.99) 端口(6379) 此处为主服务的ip和端口因为主服务上设置了密码所以需要修改masterauth ,并将requirepass注释掉此时redis主从应配置完成通过start.sh分别启动redis（10.105.76.99）和(10.10.576.100) 通过ps -ef|grep redis查看进程，出现如下图说明redis启动完成二.redis测试第一步：编写redis客户端启动shell可以写一个shell脚本启动redis客户端cd /usr/local/redis-2.8.17/,touch startcli.sh,vi startcli.sh startcli.sh内容为src/redis-cli，并将此文件拷贝到从服务器10.105.76.100第二步：启动客户端在主服务器端(10.105.76.99) 命令：sh startcli.sh第三步：操作输入密码auth itmiredis第四步:set name test第五步:get name第六步:从服务器端启动客户端从服务器端启动客户端(10.105.76.100),sh startcli.sh第七步:从服务器端(10.105.76.100) get name此时说明主从服务已经搭建完成。

redis cluster--redis集群模式原理

redis cluster--redis集群模式原理Redis Cluster是Redis官方推出的分布式架构，它可以将多台Redis服务器看作是一个整体来使用，提供了高可用性、高扩展性等优点。

Redis Cluster基于分区的思想，将key映射到集群中的某一个节点上，每个节点负责一部分key。

通过互相通信来维护全局一致性和去重。

Redis Cluster集群模式分为以下几个部分：1、集群的节点数量不同，可以由多个Master节点和多个Slave节点组成。

2、每个节点都有一个唯一的名称（注意是名称不是IP地址），通过名称进行通信。

3、Redis Cluster将整个数据集分成16384个hash slot，每个节点可以处理其中一部分，节点之间通过Gossip协议交换信息，保持整个集群信息的一致性。

4、一个Redis节点可以既是Master，也可以是Slave。

Master节点负责处理客户端请求，而Slave节点则仅用于备份和读取数据，Master节点操作的数据会被同步到Slave节点。

5、在Redis Cluster中，如果一个Master节点宕机，它上面的所有Slave节点都不能升级为Master节点。

而是会自动进行故障转移，将失效的Master节点的Slot分配给其他运行正常的Master节点，并将其对应的Slave节点降级为Master节点，从而保证整个集群的可用性。

6、对于新加入的节点，可以使用resharding命令进行Slot的再分配。

重新分配Slot会导致数据迁移，因此需要慎重考虑。

总之，Redis Cluster集群模式的优点在于它能够提供高可用性、高扩展性、自动故障转移等特性。

但同时也需要注意一些坑点，如节点名称不能重复、节点之间的网络延迟等问题。

Redis集群使用指南

Redis集群使用指南一、Redis集群简介Redis（Remote Dictionary Server）是一个开源的基于内存的键值对存储系统，经常用来作为缓存、消息队列和数据库。

在实际使用过程中，Redis可能会出现性能瓶颈和单点故障。

为了解决这些问题，Redis提供了集群模式。

Redis集群是对多个Redis节点进行逻辑分区和复制，从而实现高可用、高性能和可伸缩性。

Redis集群能够自动进行故障转移和重新分配，可以提供更好的可靠性和吞吐量。

二、Redis集群的工作原理Redis集群采用哈希槽（Hash Slot）的方式来实现数据的分片和复制。

一个Redis集群可以包含多个Redis节点，每个节点管理一部分哈希槽。

当客户端需要对某个键进行操作时，Redis首先计算该键对应的哈希值，然后将其分配到某个哈希槽中。

Redis集群根据哈希槽的分配情况，将该键的操作转发给相应的Redis节点进行处理。

如果某个节点出现故障，Redis集群会自动将该节点管理的哈希槽重新分配给其他节点。

Redis集群采用主从复制的方式来实现数据的持久化和高可用。

每个主节点可以有多个从节点，主节点负责处理读写请求，同时将数据复制到从节点。

如果主节点出现故障，其中的一个从节点会被自动选举为新的主节点，继续处理客户端请求。

三、搭建Redis集群的步骤1、安装Redis节点在Linux系统上安装Redis比较简单，可以使用以下命令：sudo apt-get updatesudo apt-get install redis-server安装完毕后，可以通过以下命令启动Redis服务：sudo service redis-server start2、配置Redis节点每个Redis节点都需要进行一些配置，以便加入到Redis集群中。

可以通过以下命令进入Redis配置文件：sudo vim /etc/redis/redis.conf需要修改的配置项有以下几个：cluster-enabled yes：启用Redis集群模式。

面试题详解：如何用Redis实现分布式锁？

⾯试题详解：如何⽤Redis实现分布式锁？说⼀道常见⾯试题：使⽤Redis分布式锁的详细⽅案是什么？⼀个很简单的答案就是去使⽤ Redission 客户端。

Redission 中的锁⽅案就是 Redis 分布式锁的⽐较完美的详细⽅案。

那么，Redission 中的锁⽅案为什么会⽐较完美呢？正好，我⽤ Redis 做分布式锁经验⼗分丰富，在实际⼯作中，也探索过许多种使⽤ Redis 做分布式锁的⽅案，经过了⽆数⾎泪教训。

所以，在谈及 Redission 锁为什么⽐较完美之前，先给⼤家看看我曾经使⽤ Redis 做分布式锁遇到过的问题。

我曾经⽤ Redis 做分布式锁想去解决⼀个⽤户抢优惠券的问题。

这个业务需求是这样的：当⽤户领完⼀张优惠券后，优惠券的数量必须相应减⼀，如果优惠券抢光了，就不允许⽤户再抢了。

在实现时，先从数据库中先读出优惠券的数量进⾏判断，当优惠券⼤于 0，就进⾏允许领取优惠券，然后，再将优惠券数量减⼀后，写回数据库。

当时由于请求数量⽐较多，所以，我们使⽤了三台服务器去做分流。

这时候会出现⼀个问题：如果其中⼀台服务器上的 A 应⽤获取到了优惠券的数量之后，由于处理相关业务逻辑，未及时更新数据库的优惠券数量；在 A 应⽤处理业务逻辑的时候，另⼀台服务器上的 B 应⽤更新了优惠券数量。

那么，等 A 应⽤去更新数据库中优惠券数量时，就会把 B 应⽤更新的优惠券数量覆盖掉。

看到这⾥，可能有⼈⽐较奇怪，为什么这⾥不直接使⽤ SQL：update 优惠券表 set 优惠券数量 = 优惠券数量 - 1 where 优惠券id = xxx原因是这样做，在没有分布式锁协调下，优惠券数量可能直接会出现负数。

因为当优惠券数量为 1 的时候，如果两个⽤户通过两台服务器同时发起抢优惠券的请求，都满⾜优惠券⼤于 0 的条件，然后都执⾏这条 SQL 语句，结果优惠券数量直接变成 -1 了。

还有⼈说可以⽤乐观锁，⽐如使⽤如下 SQL:update 优惠券表 set 优惠券数量 = 优惠券数量 - 1 where 优惠券id = xxx and version = xx这种⽅式就在⼀定⼏率下，很可能出现数据⼀直更新不上，导致长时间重试的情况。

Redis-集群 - 三台服务器

Redis-集群安装详细步骤一、Redis集群部署文档(centos6系统)现有三台物理机10.18.154.2 10.18.154.3 10.18.154.4（要让集群正常工作至少需要3个主节点，在这里我们要创建6个redis节点，其中三个为主节点，三个为从节点，对应的redis节点的ip和端口对应关系如下）10.18.154.2:700010.18.154.2:700110.18.154.3:700010.18.154.3:700110.18.154.4:700010.18.154.4:7001二、安装Redis（10.18.154.2、10.18.154.3、10.18.154.4）下载redis-3.2.1.tar.gz[root@localhost ~]# tar zxvf redis-3.2.1.tar.gz[root@localhost ~]# cd redis-3.2.1[root@localhost redis-3.2.1]# make[root@localhost redis-3.2.1]# make install[root@localhost ~]# mv redis-3.2.1 /usr/local/redis[root@localhost ~]# cd /usr/local/redis/[root@localhost ~]# mkdir /usr/local/cluster[root@localhost ~]# cp /usr/local/redis/redis.conf /usr/local/cluster/[root@localhost ~]# vi /usr/local/cluster/redis.conf##修改配置文件中的下面选项port 7000bind 10.18.154.2 127.0.0.1daemonize yes#如果你想让它在后台运行，你就把它改成yescluster-enabled yescluster-config-file nodes.confcluster-node-timeout 5000appendonly yes[root@localhost ~]# mkdir /usr/local/cluster/7000[root@localhost ~]# mkdir /usr/local/cluster/7001[root@localhost ~]# cp /usr/local/cluster/redis.conf /usr/local/cluster/7000[root@localhost ~]# cp /usr/local/cluster/redis.conf /usr/local/cluster/7001[root@localhost ~]# cp /usr/local/cluster/redis.conf /usr/local/cluster/7002[root@localhost 7000]# redis-server redis.conf ---启动redis服务##注意：拷贝完成之后要修改7001目录下面redis.conf文件中的port参数，分别改为对应的文件夹的名称##启动之后使用命令查看redis的启动情况ps -ef|grep redis三、执行redis的创建集群命令创建集群[root@localhost src]# cd /usr/local/redis/src/[root@localhost src]#./redis-trib.rb create --replicas 1 10.18.154.2:700010.18.154.2:7001 10.18.154.3:7000 10.18.154.3:7001 10.18.154.4:700010.18.154.4:7001执行上面的命令的时候会报错，因为是执行的ruby的脚本，需要ruby的环境错误内容：/usr/bin/env: ruby: No such file or directory所以需要安装ruby的环境，这里推荐使用yum install ruby安装yum install ruby然后再执行创建集群命令，报错，提示缺少rubygems组件，使用yum安装错误内容：./redis-trib.rb:24:in `require': no such file to load -- rubygems (LoadError)from ./redis-trib.rb:24yum install rubygems再次执行创建集群命令，报错提示不能加载redis，是缺少redis、ruby接口，gem 安装错误内容：/usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `gem_original_require': no such file to load -- redis (LoadError)from /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `require'gem install redis这里可能无法安装,因为无法连接gem服务器：[root@localhost ~]# gem install redis --version 3.0.0ERROR: Could not find a valid gem 'redis' (= 3.0.0) in any repository#需要手工下载并安装：wget https:///gems/redis-3.2.1.gemgem install -l ./redis-3.2.1.gem输入yes，然后配置完成。

1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。

#执行redis的创建集群命令创建集群[root@localhost src]#./redis-trib.rb create --replicas 1 10.18.154.2:700010.18.154.2:7001 10.18.154.3:7000 10.18.154.3:7001 10.18.154.4:700010.18.154.4:7001至此redis集群即搭建成功！使用redis-cli命令进入集群环境redis-cli -c–h 10.18.154.2 –p 7000四、测试先把10.18.154.2或10.18.154.3服务Down掉，CLUSTER INFO集群没有没有影响。

把10.18.154.4服务Down掉，CLUSTER INFO集群不可用。

Redis服务一、复制脚本到/etc/rc.d/init.d目录ps: /etc/rc.d/init.d/目录下的脚本就类似与windows中的注册表，在系统启动的时候某些指定脚本将被执行按以上步骤安装Redis时，其服务脚本位于：/usr/local/src/redis/utils/redis_init_script必须将其复制到/etc/rc.d/init.d的目录下：cp /usr/local/redis/utils/redis_init_script/etc/rc.d/init.d/7000将redis_init_script复制到/etc/rc.d/init.d/，同时易名为7000。

chkconfig --add redis将报以下错误：service redis does not support chkconfigredis服务不支持chkconfig为此，我们需要更改redis脚本。

二、更改redis脚本打开使用vi打开脚本，查看脚本信息：vi /etc/rc.d/init.d/7000看到的内容如下(下内容是更改好的信息)：#!/bin/sh#chkconfig: 2345 80 90# Simple Redis init.d script conceived to work on Linux systems# as it does use of the /proc filesystem.REDISPORT=7000EXEC=/usr/local/bin/redis-serverCLIEXEC=/usr/local/bin/redis-cliPIDFILE=/var/run/redis_${REDISPORT}.pidCONF="/usr/local/cluster/ ${REDISPORT}.conf"case "$1" instart)if [ -f $PIDFILE ]thenecho "$PIDFILE exists, process is already running or crashed"elseecho "Starting Redis server..."$EXEC $CONF &fi;;stop)if [ ! -f $PIDFILE ]thenecho "$PIDFILE does not exist, process is not running"elsePID=$(cat $PIDFILE)echo "Stopping ..."$CLIEXEC -p $REDISPORT shutdownwhile [ -x /proc/${PID} ]doecho "Waiting for Redis to shutdown ..."sleep 1doneecho "Redis stopped"fi;;*)echo "Please use start or stop as first argument";;esac和原配置文件相比：1.原文件是没有以下第2行的内容的，#chkconfig: 2345 80 902.原文件EXEC、CLIEXEC参数，也是有所更改。

EXEC=/usr/local/bin/redis-serverCLIEXEC=/usr/local/bin/redis-cliCONF="/usr/local/cluster/ ${REDISPORT}.conf"3.redis开启的命令，以后台运行的方式执行。

$EXEC $CONF &ps:注意后面的那个“&”，即是将服务转到后面运行的意思，否则启动服务时，Redis 服务将占据在前台，占用了主用户界面，造成其它的命令执行不了。