【部署篇】Redis-01介绍‌

一、Redis介绍‌

1、什么是Redis?

‌Redis,英文全称是Remote Dictionary Server (远程字典服务),**Redis是一个开源的、使用‌ANSI C语言编写的‌Key-Value存储系统,支持网络、可基于内存亦可持久化。**‌ 它提供了多种数据结构和API,适用于缓存、NoSQL数据库等多种场景。Redis具有高性能、多种数据结构、持久化、高可用性等特点,广泛应用于互联网和大数据领域。

2、Redis的主要特性

  • 速度快‌:数据存储在内存中,可达到10万OPS。
  • 可持久化‌:所有数据保存在内存中,对数据的更新异步地保存在硬盘中。
  • 多种数据结构 ‌:包括String(字符串)、Hash(哈希)、List(列表)、Set(集合)、zset(有序集合)、Bitmap(位图)、HyperLogLog( 基数统计*)*、GEO(地理位置信息)等。
  • 多语言支持 ‌:支持‌JAVA、‌PHP、‌RUBY、‌Python等多种语言的API。
  • 功能丰富‌:包括发布订阅、Lua脚本、事务等。
  • 简单‌:源码只有23000行代码,不依赖外部库,单线程。
  • 可复制和高可用‌:支持主从同步,提供高可用性和分布式部署。

3、Redis的应用场景

  • 缓存‌:Redis常用于缓存数据库查询结果,减少数据库负载。
  • 实时数据分析‌:利用Redis的快速读写能力进行实时数据分析。
  • 消息队列‌:使用Redis的发布/订阅功能实现消息队列。
  • 会话管理‌:在Web应用中管理用户会话。
  • 排行榜‌:利用有序集合实现排行榜功能。

4、Redis的优势

  • 高性能‌:Redis以其高速读写能力在处理大量数据时表现出色。
  • 灵活性‌:支持多种数据结构和操作,适用于多种应用场景。
  • 可靠性‌:通过持久化和主从同步保证数据的安全和可靠性。
  • 易用性‌:提供多种语言的API和简单的源码,易于集成和使用。

二、部署模式

1、单机部署

1)缺点
  • 单点故障,服务不可用
  • 无法处理大量的并发数据
  • 数据无容灾易丢失
  • Redis默认单进程

2、主从模式部署

1)介绍

主从模式是三种模式中最简单的,在主从复制中,数据库分为两类:主数据库(master)和从数据库(slave)。

2)特点

主数据库可以进行读写操作,当读写操作导致数据变化时会自动将数据同步给从数据库; - 从数据库一般是只读的,并且接收主数据库同步过来的数据; - 一个master可以拥有多个slave,但是一个slave只能对应一个master; - slave挂了不影响其他slave的读和master的读和写,重新启动后会将数据从master同步过来; - master挂了以后,不影响slave的读,但redis不再提供写服务,master重启后redis将重新对外提供写服务; - master挂了以后,不会在slave节点中重新选一个master;

3)工作机制

当slave启动后,主动向master发送SYNC命令。master接收到SYNC命令后在后台保存快照(RDB持久化)和缓存保存快照这段时间的命令,然后将保存的快照文件和缓存的命令发送给slave。slave接收到快照文件和命令后加载快照文件和缓存的执行命令。 - 复制初始化后,master每次接收到的写命令都会同步发送给slave,保证主从数据一致性。

4)环境说明

至少3个节点。

3、Sentinel(哨兵)模式

1)简介

主从模式的弊端就是不具备高可用性,当master挂掉以后,Redis将不能再对外提供写入操作,因此sentinel模式应运而生。sentinel中文含义为哨兵,顾名思义,它的作用就是监控redis集群的运行状况

2)特点

sentinel模式是建立在主从模式的基础上,如果只有一个Redis节点,sentinel就没有任何意义;

当master挂了以后,sentinel会在slave中选择一个做为master,并修改它们的配置文件,其他slave的配置文件也会被修改,比如slaveof属性会指向新的master;

当master重新启动后,它将不再是master,而是做为slave接收新的master的同步数据;

sentinel因为也是一个进程,所以有挂掉的可能,所以sentinel也会启动多个形成一个sentinel集群;

多sentinel配置的时候,sentinel之间也会自动监控;

当主从模式配置密码时,sentinel也会同步将配置信息修改到配置文件中;

一个sentinel或sentinel集群可以管理多个主从Redis,多个sentinel也可以监控同一个redis;

sentinel最好不要和Redis部署在同一台机器,不然Redis的服务器挂了以后,sentinel也可能会挂掉。

3)原理图

4)工作流程

每个sentinel以每秒钟一次的频率向它所知的master,slave以及其他sentinel实例发送一个 PING 命令; - 如果一个实例距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值, 则这个实例会被sentinel标记为主观下线; - 如果一个master被标记为主观下线,则正在监视这个master的所有sentinel要以每秒一次的频率确认master的确进入了主观下线状态; - 当有足够数量的sentinel(大于等于配置文件指定的值)在指定的时间范围内确认master的确进入了主观下线状态, 则master会被标记为客观下线; - 在一般情况下, 每个sentinel会以每 10 秒一次的频率向它已知的所有master,slave发送 INFO 命令; - 当master被sentinel标记为客观下线时,sentinel向下线的master的所有slave发送 INFO 命令的频率会从 10 秒一次改为 1 秒一次; - 若没有足够数量的sentinel同意master已经下线,master的客观下线状态就会被移除;若master重新向sentinel的 PING 命令返回有效回复,master的主观下线状态就会被移除。

5)环境说明

sentinel 最好跟redis部署在不同的机器上,建议至少各三个节点。

6)缺点

(1)复杂性高:Redis哨兵的部署和维护相对比较复杂,一个Redis集群通常需要至少三个哨兵节点才能正常工作,因为Redis的failover机制是基于哨兵之间的投票机制来实现的。每个哨兵节点都需要配置哨兵的角色和监控条件,这个过程需要耗费一定的时间和精力,并且在集群节点变化时还需要手动修改哨兵配置文件。除此之外,Redis哨兵还需要安装和配置多个Redis节点,每个节点都需要开放相应的端口才能完成数据通信,这也增加了配置的复杂性。

(2)可用性不稳定:Redis哨兵的故障恢复速度相对较慢,当一个主节点发生故障时,哨兵可能需要等待一段时间才能检测到,然后再进行自动故障转移,这个过程可能需要数秒到数十秒不等,导致业务中断的时间比较长。此外,当一个次级节点在进行故障切换时,还需要采取复杂的投票机制来确保数据的一致性,这也会导致故障转移的速度比较慢,对业务的影响比较大。

(3)性能损失:Redis哨兵本身也会对Redis集群的性能造成一定的影响,因为每个哨兵节点需要定期向Redis节点发送心跳包进行状态检测,这会占用部分系统资源。此外,Redis哨兵的自动故障转移也需要消耗相应的网络带宽和计算资源,会降低Redis的整体性能。

4、Cluster(集群)模式

1)简介

Redis 的哨兵模式基本已经可以实现高可用,读写分离 ,但是在这种模式下每台 Redis 服务器都存储相同的数据,很浪费内存,所以在 redis3.0上加入了 Cluster 集群模式,实现了 Redis 的分布式存储,也就是说每台 Redis 节点上存储不同的内容。

2)特点

sentinel模式基本可以满足一般生产的需求,具备高可用性。但是当数据量过大到一台服务器存放不下的情况时,主从模式或sentinel模式就不能满足需求了,这个时候需要对存储的数据进行分片,将数据存储到多个Redis实例中。cluster模式的出现就是为了解决单机Redis容量有限的问题,将Redis的数据根据一定的规则分配到多台机器。

cluster可以说是sentinel+主从模式的结合体,通过cluster可以实现主从和master重选功能,所以如果配置两个副本三个分片的话,就需要六个Redis实例。因为Redis的数据是根据一定规则分配到cluster的不同机器的,当数据量过大时,可以新增机器进行扩容。

使用集群,只需要将redis配置文件中的cluster-enable配置打开即可,每个集群中至少需要三个主数据库才能正常运行,新增节点非常方便。

3)原理图

可以看到,Cluster 集群模式有如下一些特点: - 多个redis节点网络互联,数据共享; - 所有的节点都是一主一从(也可以是一主多从),其中从不提供服务,仅作为备用; - 不支持同时处理多个key(如MSET/MGET),因为redis需要把key均匀分布在各个节点上,并发量很高的情况下同时创建key-value会降低性能并导致不可预测的行为; - 支持在线增加、删除节点; - 客户端可以连接任何一个主节点进行读写。

4)环境说明

至少三台机器,然后分别开启三个redis服务,即每个节点都要是一主两从模式。

三、核心参数

生产环境daemonize改为yes,不然我每次启动都得在redis-server命令后面加符号&,否则只要回到Linux控制台则redis服务会自动关闭,同时也将bind注释,将protected-mode设置为no。这样启动后我就可以在远程访问了。

配置项名称 配置项值范围 说明
daemonize yes、no yes表示启用守护进程,默认是no即不以守护进程方式运行。其中Windows系统下不支持启用守护进程方式运行
port 指定 Redis 监听端口,默认端口为 6379
bind 绑定的主机地址,如果需要设置远程访问则直接将这个属性备注下或者改为bind * 即可,这个属性和下面的protected-mode控制了是否可以远程访问 。
protected-mode yes 、no 保护模式,该模式控制外部网是否可以连接redis服务,默认是yes,所以默认我们外网是无法访问的,如需外网连接rendis服务则需要将此属性改为no
timeout 300 当客户端闲置多长时间后关闭连接,如果指定为 0,表示关闭该功能
loglevel debug、verbose、notice、warning 日志级别,默认为 notice
databases 16 设置数据库的数量,默认的数据库是0。整个通过客户端工具可以看得到
rdbcompression yes、no 指定存储至本地数据库时是否压缩数据,默认为 yes,Redis 采用 LZF 压缩,如果为了节省 CPU 时间,可以关闭该选项,但会导致数据库文件变的巨大。
dbfilename 指定本地数据库文件名,默认值为 dump.rdb
dir 指定本地数据库存放目录
requirepass 设置 Redis 连接密码,如果配置了连接密码,客户端在连接 Redis 时需要通过 AUTH <password> 命令提供密码,默认关闭
maxclients 0 设置同一时间最大客户端连接数,默认无限制,Redis 可以同时打开的客户端连接数为 Redis 进程可以打开的最大文件描述符数,如果设置 maxclients 0,表示不作限制。当客户端连接数到达限制时,Redis 会关闭新的连接并向客户端返回 max number of clients reached 错误信息
maxmemory XXX <bytes> 指定 Redis 最大内存限制,Redis 在启动时会把数据加载到内存中,达到最大内存后,Redis 会先尝试清除已到期或即将到期的 Key,当此方法处理 后,仍然到达最大内存设置,将无法再进行写入操作,但仍然可以进行读取操作。Redis 新的 vm 机制,会把 Key 存放内存,Value
save save 900 1 save 300 10 save 60 10000 save是用来控制Redis进行数据保存的频率,以下是配置示例说明: * 如果在900秒以内有1个key被改动,则进行数据保存。 * 如果在300秒以内有10个key被改动,则进行数据保存。 * 如果在60秒以内有10000个key被改动,则进行数据保存。

四、可视化管理工具

RedisClient

是否收费:免费。

项目介绍:Java 编写的 Redis 连接客户端,功能丰富,并且是免费的。

支持平台:Windows。

项目地址GitHub - caoxinyu/RedisClient: Java Redis Client GUI Tool

RedisStudio

是否收费:免费。

项目介绍:一款 C++ 编写的 Redis 管理工具,比较老,好久没更新了。

支持平台:Windows。

项目地址GitHub - cinience/RedisStudio: RedisStudio Redis GUI client(tool) for windows

AnotherRedisDesktopManager

是否收费:免费。

项目介绍:一款基于 Node.js 开发的 Redis 桌面管理器,它的特点就是相对来说比较稳定,在数据量比较大的时候不会崩溃。

支持平台:Windows、macOS、Linux。

项目地址:github - qishibo/AnotherRedisDesktopManager

五、更多Redis文章跟篇

【部署篇】Redis-01介绍
【部署篇】Redis-02单机模式部署(源码方式安装)
【部署篇】Redis-03主从模式部署(源码方式安装)
【部署篇】Redis-04哨兵模式部署(源码方式安装)

相关推荐
云和数据.ChenGuang1 小时前
Django 应用安装脚本 – 如何将应用添加到 INSTALLED_APPS 设置中 原创
数据库·django·sqlite
woshilys2 小时前
sql server 查询对象的修改时间
运维·数据库·sqlserver
Hacker_LaoYi2 小时前
SQL注入的那些面试题总结
数据库·sql
建投数据3 小时前
建投数据与腾讯云数据库TDSQL完成产品兼容性互认证
数据库·腾讯云
Hacker_LaoYi4 小时前
【渗透技术总结】SQL手工注入总结
数据库·sql
岁月变迁呀4 小时前
Redis梳理
数据库·redis·缓存
独行soc4 小时前
#渗透测试#漏洞挖掘#红蓝攻防#护网#sql注入介绍06-基于子查询的SQL注入(Subquery-Based SQL Injection)
数据库·sql·安全·web安全·漏洞挖掘·hw
你的微笑,乱了夏天4 小时前
linux centos 7 安装 mongodb7
数据库·mongodb
黄油饼卷咖喱鸡就味增汤拌孜然羊肉炒饭5 小时前
SpringBoot如何实现缓存预热?
java·spring boot·spring·缓存·程序员
工业甲酰苯胺5 小时前
分布式系统架构:服务容错
数据库·架构