中间件 | Redis - [基本信息]

INDEX

      • [§1 常规用法](#§1 常规用法)
      • [§2 QPS](#§2 QPS)
      • [§3 pipeline](#§3 pipeline)

§1 常规用法

分布式锁

最常见用法,需要注意分布式锁的redis需要单点

分布式事务

分布式事务中,核心的技术难点其实是分布式事务这个事本身作为数据的持久化

  • 2PC,比如 seata 的 AT 模式下,将 undo 数据作为分布式事务数据进行了持久化
  • TCC 模式中,将事务锁作为分布式事务数据进行了持久化
  • 可靠性消息中,事务消息(transztionalMessage)即分布式事务消息的持久化
  • 独立消息服务中,要发一个什么样的消息这个信息作为分布式事务数据进行持久化

而 redis,本身也可以作为分布式事务数据的持久化容器,这是因为大部分分布式事务的处理过程中,最终分布式事务数据是要被物理删除的

分布式 ID

比如雪花算法的实现

简易消息队列

并发量较低、业务模型比较简单的分布式系统中可用

其他

计数器、排行榜、统计、开关标记集

§2 QPS

10W+

§3 pipeline

pipeline 简单的说就是指令打包

一个 redis 的指令(其实不限于 redis)可以分为 4 个阶段

  • 发出
  • 排队
  • 执行
  • 返回
    其中,1/4阶段都设计网络传输(即 RTT ,往返时间)。有可能,往返时间远高于指令的排队+执行时间,于是造成了相对显著的性能浪费

pipeline 可以批量发送指令给 redis-server

应用 & 最佳实践

通常使用 redis api 中提供的 pipeline

java 复制代码
Jedis jedis;

Pipeline p = jedis.pipelined();
p.set(key1,value1);
p.set(key2,value2);
p.set(key3,value3);
pipelined.sync();

通常,使用 pipeline 时,建议每次 pipeline 中报文总大小不超过 1460 字节,否则可能导致 http 拆包,也会造成性能损耗

集群 vs pipeline

pipeline 需要打包一批指令一口气提交到 redis-server 处理

在集群背景下,这一批指令很可能不在同一个集群节点上,redis 官方 API 如 jedis 等没有对这中操作进行支持(其实无论如何,都已经不能按 pipeline 初衷去使用了)

假设支持(比如头铁自研),需要注意死锁问题

假设 redis 有 ABC,pipeline 中指令的 key 分别对应 3 台机器

则只有 pipeline 同时持有 3个节点的连接时,才能正确提交

但可能获取到 AB 连接后,C 节点连接被全部占用,于是等待 C

而这两个等待的 AB 连接又禁止了其他指令使用,最终导致死锁

综上:集群中,不要用

相关推荐
马克Markorg5 小时前
常见的向量数据库和具有向量数据库能力的数据库
数据库
Coder_Boy_7 小时前
技术让开发更轻松的底层矛盾
java·大数据·数据库·人工智能·深度学习
helloworldandy7 小时前
使用Pandas进行数据分析:从数据清洗到可视化
jvm·数据库·python
数据知道9 小时前
PostgreSQL 故障排查:如何找出数据库中最耗时的 SQL 语句
数据库·sql·postgresql
qq_12498707539 小时前
基于SSM的动物保护系统的设计与实现(源码+论文+部署+安装)
java·数据库·spring boot·毕业设计·ssm·计算机毕业设计
枷锁—sha9 小时前
【SRC】SQL注入WAF 绕过应对策略(二)
网络·数据库·python·sql·安全·网络安全
Coder_Boy_9 小时前
基于SpringAI的在线考试系统-考试系统开发流程案例
java·数据库·人工智能·spring boot·后端
Gain_chance9 小时前
35-学习笔记尚硅谷数仓搭建-DWS层最近n日汇总表及历史至今汇总表建表语句
数据库·数据仓库·hive·笔记·学习
此生只爱蛋10 小时前
【Redis】主从复制
数据库·redis
马猴烧酒.10 小时前
【面试八股|JAVA多线程】JAVA多线程常考面试题详解
java·服务器·数据库