查询优化之“查询分离”

什么业务场景需要使用查询分离

当数据在任何时候都可能被修改和查询的场景下,就不适合采用冷热分离来解决问题。而读写分离方案得到的工单查询速度提升是有限的,它主要还是用在数据库高并发的场景中。查询分离可以有效提升数据的查询效率,即将更新的数据放在主数据库里,而查询的数据放在另外一个专门针对搜索的存储系统里。

何时触发和如何实现查询分离

一般来说,查询分离的触发逻辑分为3种:

1)修改业务代码,在写入常规数据后同步更新查询数据,该方式适用于业务代码比较简单,对写操作响应时间要求不高的业务场景。

2)修改业务代码,在写入常规数据后异步更新查询数据,该方式适用于业务代码比较简单,对写操作响应时间要求高的业务场景。

3)监控数据库日志,如有数据变更,则更新查询数据,该方式适用于业务代码比较复杂,代码改动代价较高的情况。

三种方式的优缺点比较:

如何存储查询分离的数据

目前开发者们主要使用Elasticsearch实现大数据量的搜索查询,当然还可能用到MongoDB、HBase这些技术,这就需要开发者对各种技术的特性了如指掌后再进行技术选型。

HBase可以存储海量数据,但是其设计初衷并不是用来做复杂查询,即使可以做到,效率也不高。而此处的工单查询复杂度很高,所以项目组最后锁定的两个选项是MongoDB和Elasticsearch。

技术选型不仅要考虑业务场景,也要考虑技术人员的技术结构,对技术是否有经验和熟悉。

相关推荐
cyforkk20 分钟前
MySQL锁机制详解:从乐观锁到悲观锁
数据库·mysql
ShiXZ21330 分钟前
指令集-SQL 常用指令速查手册
数据库·sql·mysql·oracle
阿昭L1 小时前
数据库期末复习(三)
数据库
Dlrb12111 小时前
信息查询Web服务器-->电子商城信息查询项目
linux·服务器·数据库·html·嵌入式·epoll·数据查询
不会写DN1 小时前
MySQL 并发插入竞态问题:原子写入实践指南
数据库·mysql
霖霖总总1 小时前
[MongoDB小技巧24]MongoDB $lookup 聚合阶段深度解析:从入门到实战
数据库·mongodb
挨踢诗人2 小时前
京东企业购 × 企业微信 采购闭环集成解决方案
前端·数据库·企业微信
梦想的旅途22 小时前
企业微信外部群智能自动回复:基于RPA接口的关键词匹配方案
java·开发语言·数据库·机器人·自动化·企业微信
得物技术2 小时前
得物 OceanBase 落地实践
数据库·分布式·架构
程序员cxuan2 小时前
OceanBase 为什么要做 AI 数据库?
数据库·人工智能·大模型·llm·oceanbase