redis哨兵部署
qingmuluoyang 2020-01-02
redis介绍
Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件redis是c语言编写的，支持数据持久化，是key-value类型数据库。应用在缓存，队列系统中redis支持数据备份，也就是master-slave模式
redis一秒可以执行10万个命令
redis为什么这么快？
1.是完全基于内存数据库
2.redis是完全用c写的单线程的数据库
redis如何安装
1.yum安装
安装：yum install redis -y
卸载：yum remove redis -y
启动：systemctl start redis
查看监听端口：netstat -tunlp
2.redis编译安装（注意删除安装的redis）
编译安装三部曲
1.下载redis源码wget http://download.redis.io/releases/redis-4.0.10.tar.gz2.解压缩tar -zxvf redis-4.0.10.tar.gz3.切换redis源码目录cd redis-4.0.104.编译源文件make 5.编译好后，src/目录下有编译好的redis指令6.make install 安装到指定目录，默认在/usr/local/bin
添加环境变量：vim /etc/profile
path= “/usr/local/bin”
重新加载变量文件：source /etc/profile
grep -v "^$" redis.conf |grep -v "^#" 去注释#
4.更改redis的配置文件，启动redis，支持密码和端口
touch redis.s18.conf 内容如下：
bind 192.168.91.128 # 连接ip protected-mode yes # 开启redis安全模式 port 6800 # 端口 daemonize yes #redis后台启动 pidfile /var/run/redis_6379.pid loglevel notice logfile "" requirepass 123456 #密码
启动：redis-server redis.s18.conf
检测端口：netstat -tunlp
5.登陆redis客户端
redis-cli -h 192.168.91.128 -p 6800
参数解释 -h指定主机地址 -p指定redis端口
登陆之后通过auth指令 验证密码
redis可执行文件
./redis-benchmark //用于进行redis性能测试的工具./redis-check-dump //用于修复出问题的dump.rdb文件./redis-cli //redis的客户端./redis-server //redis的服务端./redis-check-aof //用于修复出问题的AOF文件./redis-sentinel //用于集群管理
redis数据类型
redis是一种高级的key：value存储系统，其中value支持五种数据类型字符串（strings）散列（hashes）列表（lists）集合（sets）有序集合（sorted sets）
redis存放的数据是key，然后通过value来取值
keys * 查看所有keytype key 查看key类型expire key seconds 设置过期时间ttl key 查看key过期剩余时间 -2表示key已经不存在了persist key 取消key的过期时间 -1表示key存在，没有过期时间?exists key 判断key存在 存在返回1 否则0del keys 删除key 可以删除多个dbsize 计算key的数量
set key名 value名
set kevins 凯文
ger kevins 取值
1.strings类型
set 设置key
get 获取key
append key 追加string
mset 设置多个键值对
mget 获取多个键值对
del 删除key
incr key 递增+1
decr key 递减-1
redis发布订阅
发布订阅的命令
PUBLISH channel msg 将信息 message 发送到指定的频道 channelSUBSCRIBE channel [channel ...] 订阅频道，可以同时订阅多个频道UNSUBSCRIBE [channel ...] 取消订阅指定的频道, 如果不指定频道，则会取消订阅所有频道PSUBSCRIBE pattern [pattern ...] 订阅一个或多个符合给定模式的频道，每个模式以 * 作为匹配符，比如 it* 匹配所 有以 it 开头的频道( it.news 、 it.blog 、 it.tweets 等等)， news.* 匹配所有 以 news. 开头的频道( news.it 、 news.global.today 等等)，诸如此类PUNSUBSCRIBE [pattern [pattern ...]] 退订指定的规则, 如果没有参数则会退订所有规则PUBSUB subcommand [argument [argument ...]] 查看订阅与发布系统状态注意：使用发布订阅模式实现的消息队列，当有客户端订阅channel后只能收到后续发布到该频道的消息，之前发送的不会缓存，必须Provider和Consumer同时在线。
redis持久化RDB与AOF**
1.当进程挂掉，只要内存数据被释放，redis的 数据默认是会丢
2.redis支持数据持久化，两种模式
rdb持久化，是基于内存数据快照的方式，通过save指令，强制快照到数据本地，存储为一个二进制文件
3.开启rdb功能，需要修改redis.conf文件
内容如下：
daemonize yes
port 6379
logfile /data/6379/redis.log
dir /data/6379
dbfilename dbmp.rdb
bind 127.0.0.1
save 900 1
save 300 10
save 30 10000
4.开启redis服务端，支持rdb功能
redis-server redis-rdb.conf
5.登陆redis，写入数据，手动执行save触发持久化，会生成一个二进制的数据文件 dbmp.rdb，在/data/6379/redis.log目录下
redis持久化之RDB实践
1.将修改类的redis命令，记录到一个日志中，以保证数据不丢，下次重启，再执行这个文件，数据就回来
2.开启rdb模式，修改redis-aof.conf配置如下：
daemonize yesport 6379logfile /data/6379/redis.logdir /data/6379appendonly yesappendfsync everysec
3.指定aof配置文件启动
redis-server redis-aof.conf
redis 持久化方式有哪些？有什么区别？
rdb：基于快照的持久化，速度更快，一般用作备份，主从复制也是依赖于rdb持久化功能
aof：以追加的方式记录redis操作日志的文件。可以最大程度的保证redis数据安全，类似于mysql的binlog
redis在不重启的状态下，切换rdb持久化到aof持久化
1.准备一个支持rdb数据
配置文件redis-new-rdb.conf如下：
daemonize yes
port 6379
logfile /data/6379/redis.log
dir /data/6379
dbfilename dbmp.rdb
bind 127.0.0.1
save 900 1
save 300 10
save 30 10000库
2.通过命令切换到aof功能，临时生效
CONFIG set appendonly yes #开启AOF功能CONFIG SET save "" #关闭RDB功能
3.还得修改redis的配置文件，让他下次重启也是aof模式
修改redis-new-rdb.conf 配置如下：
daemonize yes port 6379 logfile /data/6379/redis.log dir /data/6379 appendonly yes appendfsync everysec
4.redis已经切换到aof模式
redis主从同步
1.redis是支持多实例的数据库 ，在一台机器上，可以运行多个隔离的数据库环境
实现多实例就是准备多个配置文件
替换：sed "s/6379/6380/g" redis-6379.conf > redis-6380.conf
准备3个配置文件，实现，一主两从的redis数据架构
准备的3个配置文件，仅仅是端口的区分就行
port 6379 daemonize yes pidfile /data/6379/redis.pid loglevel notice logfile "/data/6379/redis.log" dbfilename dump.rdb dir /data/6379 protected-mode no
port 6380 daemonize yes pidfile /data/6380/redis.pid loglevel notice logfile "/data/6380/redis.log" dbfilename dump.rdb dir /data/6380 protected-mode no
slaveof 127.0.0.1 6379
port 6381 daemonize yes pidfile /data/6381/redis.pid loglevel notice logfile "/data/6381/redis.log" dbfilename dump.rdb dir /data/6381 protected-mode no
slaveof 127.0.0.1 6379
追加命令：echo "slaveof 127.0.0.1 6379" >> redis-6381.conf
三个同样的文件
建立文件夹：mkdir -p /data/{6379,6380,6381}
分别启动三个redis数据库实例
redis-server redis-6379.conf
redis-server redis-6380.conf redis-server redis-6381.conf
查看三个数据库的身份信息，检测主从状态
进入：redis-cli -p 6379
输入：info
查看Replication结果：
role:master connected_slaves:2 slave0:ip=127.0.0.1,port=6380,state=online,offset=280,lag=1 slave1:ip=127.0.0.1,port=6381,state=online,offset=280,lag=1 master_replid:8ebe1c8b3f2211e1be132332d7548d059cffc954 master_replid2:0000000000000000000000000000000000000000 master_repl_offset:280 second_repl_offset:-1 repl_backlog_active:1 repl_backlog_size:1048576 repl_backlog_first_byte_offset:1 repl_backlog_histlen:280
测试写入主库 6379数据，查看两个从库的信息，确认6380，6381
演示干掉主库，手动切换主从故障
1.手动检查进程，杀死主库，演示故障
2.手动切换某一个从库，换成主库身份
就是redis-cli -p 6380 登陆6380后，输入 slaveof on one，去掉自己的slave身份
3.将6381重新指引到6380位从库，
redis-cli -p 6381登陆6381后，输入slaveof 127.0.0.1 6380
4.手动改配置文件
自动的redis主从切换，是哨兵功能
/opt/s18redis目录下
1.环境配置 准备3个redis数据库实例
准备3个配置文件
redis-6379.conf
port 6379 daemonize yes logfile "6379.log" dbfilename "dump-6379.rdb" dir "/var/redis/data/"
redis-6380.conf
port 6380 daemonize yes logfile "6380.log" dbfilename "dump-6380.rdb" dir "/var/redis/data/" slaveof 127.0.0.1 6379 // 从属主节点
redis-6381.conf
port 6381 daemonize yes logfile "6380.log" dbfilename "dump-6380.rdb" dir "/var/redis/data/" slaveof 127.0.0.1 6379 // 从属主节点
建立文件夹：mkdir -p /data/{6379,6380,6381}
检测身份信息：redis-cli -p 6370 进入后输入：info
此时再准备三个哨兵，就是三个值班的，检测redis主从状态
三个哨兵配置文件如下：
redis-26379.conf
port 26379 dir /var/redis/data/ logfile "26379.log" // 当前Sentinel节点监控 127.0.0.1 6379 这个主节点 // 2代表判断主节点失败至少需要2个Sentinel节点节点同意 // s18ms是主节点的别名 sentinel monitor s18ms 127.0.0.1 6379 2 //每个Sentinel节点都要定期PING命令来判断Redis数据节点和其余Sentinel节点是否可达，如果超过30000毫秒30s且没有回复，则判定不可达 sentinel down-after-milliseconds s18ms 30000 //当Sentinel节点集合对主节点故障判定达成一致时，Sentinel领导者节点会做故障转移操作，选出新的主节点，原来的从节点会向新的主节点发起复制操作，限制每次向新的主节点发起复制操作的从节点个数为1 sentinel parallel-syncs s18ms 1 //故障转移超时时间为180000毫秒 sentinel failover-timeout s18ms 180000 daemonize yes
redis-26380.conf
port 26380 dir /var/redis/data/ logfile "26380.log"
sentinel monitor s18ms 127.0.0.1 6379 2 sentinel down-after-milliseconds s18ms 30000
sentinel parallel-syncs s18ms 1 sentinel failover-timeout s18ms 180000 daemonize yes
redis-26381.conf
port 26381 dir /var/redis/data/ logfile "26381.log"
sentinel monitor s18ms 127.0.0.1 6379 2 sentinel down-after-milliseconds s18ms 30000
sentinel parallel-syncs s18ms 1 sentinel failover-timeout s18ms 180000 daemonize yes
分别启动三个哨兵
536 redis-sentinel redis-26379.conf 537 redis-sentinel redis-26380.conf 538 redis-sentinel redis-26381.conf
查看哨兵信息：
redis-cli -p 26379
输入：info sentinel
此时哨兵已经正确，三个哨兵，检测者一主两从：
sentinel_masters:1 sentinel_tilt:0 sentinel_running_scripts:0 sentinel_scripts_queue_length:0 sentinel_simulate_failure_flags:0 master0:name=s18ms,status=ok,address=127.0.0.1:6379,slaves=2,sentinels=3
自动主从故障切换演练
1.干掉3679，查看6380和6381的身份信息
2.正确是 哨兵会选举6380为新的master，然后为6380为6381新salve
3.当6379重新复活之后，会自动添加到主从架构之中
redis-cluster的集群搭建
1.环境准备，准备6个节点(6批马儿)，指的就是启动6个redis数据库实例
6个节点仅仅是端口不同
redis-7000.conf
port 7000 daemonize yes dir "/opt/redis/data" logfile "7000.log" dbfilename "dump-7000.rdb" cluster-enabled yes #开启集群模式 cluster-config-file nodes-7000.conf #集群内部的配置文件 cluster-require-full-coverage no #redis cluster需要16384个slot都正常的时候才能对外提供服务，换句话说，只要任何一个slot异常那么整个cluster不对外提供服务。 因此生产环境一般为no
五个文件仅仅的是端口不同
redis-7001.conf
port 7001 daemonize yes dir "/opt/redis/data" logfile "7001.log" dbfilename "dump-7001.rdb" cluster-enabled yes cluster-config-file nodes-7001.conf cluster-require-full-coverage no
redis-7002.conf
redis-7003.conf
redis-7004.conf
redis-7005.conf
分别启动6个redis数据实例
[ s18cluster]# redis-server redis-7000.conf [ s18cluster]# redis-server redis-7001.conf [ s18cluster]# redis-server redis-7002.conf [ s18cluster]# redis-server redis-7003.conf [ s18cluster]# redis-server redis-7004.conf [ s18cluster]# redis-server redis-7005.conf
检查集群状态
redis-cli -p 7000
进行redis-cluster集群槽位分配
redis官方提供了ruby语言的脚本，进行自动槽位分配
perl python ruby都是脚本语言
1.安装准备ruby语言的环境，用于自动化创建redis集群
#下载ruby wget https://cache.ruby-lang.org/pub/ruby/2.3/ruby-2.3.1.tar.gz #安装ruby tar -xvf ruby-2.3.1.tar.gz ./configure --prefix=/opt/ruby/ make && make install #准备一个ruby命令#准备一个gem软件包管理命令 #拷贝ruby命令到path下/usr/local/ruby cp /opt/ruby/bin/ruby /usr/local/cp bin/gem /usr/local/bin
2.编译安装完成后，添加环境变量
把bin添加环境变量：
[ bin]# pwd /opt/ruby/bin
vim /etc/profile
source /etc/profile
3.通过ruby的软件包管理工具安装redis模块（gem就是类似python的pip工具）
在opt/s18cluster/目录下
wget http://rubygems.org/downloads/redis-3.3.0.gem # 通过gem安装这个redis包 gem install -l redis-3.3.0.gem #查看gem有哪些包 gem list -- check redis gem
4.找到ruby创建redis集群的脚本工具
命令：find /opt -name redis-trib.rb
结果：/opt/redis-4.0.10/src/redis-trib.rb
5.此时就可以通过ruby来创建redis的集群，分配槽点
一键开启redis-cluster集群
#每个主节点，有一个从节点，代表--replicas 1 /opt/redis-4.0.10/src/redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005
6.集群已经创建成功
redis-cli -p 7000 -c #-c是集群的模式
127.0.0.1:7000> set name kevins -> Redirected to slot [5798] located at 127.0.0.1:7001 OK
