Elasticsearch

目录

[1. 什么是 Elasticsearch?](#1. 什么是 Elasticsearch?)

[2. 与关系型数据库的对比](#2. 与关系型数据库的对比)

[3. 倒排索引](#3. 倒排索引)

[4. 为什么倒排索引如此高效?](#4. 为什么倒排索引如此高效?)


1. 什么是 Elasticsearch?

Elasticsearch 是一个开源的、分布式的、基于 RESTful API 的搜索和分析引擎。它建立在 Apache Lucene 搜索引擎库之上,提供了全文搜索、结构化搜索、分析以及三者结合的能力。

核心特点:

  • 分布式和高可用性: 数据被分片并分布在多个节点上,支持故障转移和扩展。

  • 近实时搜索: 数据从被索引到可搜索只有轻微的延迟(通常为 1 秒)。

  • RESTful API: 使用标准的 HTTP 方法(GET, POST, PUT, DELETE)进行所有操作,交互非常简单。

  • 面向文档: 存储的是复杂的结构化数据,序列化为 JSON 格式。

  • 模式自由(Schema-less): 无需预先定义数据结构(Schema),可以自动推断数据类型。但也支持明确定义模式以优化性能。

2. 与关系型数据库的对比

特性 Elasticsearch 关系型数据库(如 MySQL)
目的 搜索和分析 事务性数据存储(ACID)
数据模型 面向文档(JSON) 基于表和行
查询语言 RESTful API / Query DSL SQL
事务性 弱(非核心设计目标) 强(ACID)
扩展性 水平扩展(分布式) 通常垂直扩展,水平扩展较复杂
一致性 最终一致性(近实时) 强一致性

3. 倒排索引

正排索引 就是直接记录每个文档包含了什么内容。它的结构是 "文档 -> 内容"

倒排索引 则完全颠倒了这个关系。它记录的是 "单词 -> 出现在哪些文档中"

它主要包含两部分:

  1. 词项字典: 一个包含所有不重复单词(经过分词处理)的列表,也称为"词项"。

  2. 倒排列表: 对于每个词项,记录它出现在哪些文档中,以及出现的频率、位置等信息。

倒排索引 是一种将内容中的词项映射到包含它的文档 的数据结构。这种"从关键词到文档"的逆向思维,是 Elasticsearch 实现毫秒级全文搜索的基石。

4. 为什么倒排索引如此高效?

  1. 预先计算: 搜索所需的结果(词项 -> 文档的映射关系)在索引阶段就已经计算好并存储了下来。搜索时几乎是直接"查表",避免了实时遍历大量数据。

  2. 易于压缩: 倒排列表中的文档 ID 列表通常是排序好的数字,可以使用高效的压缩算法(如帧间隔编码)来减少磁盘占用和内存消耗。

  3. 适合缓存: 常用的搜索词项及其对应的倒排列表可以缓存在内存中,使得高频搜索的速度极快。

相关推荐
Georgeviewer31 分钟前
商业落地评测|实体门店GEO优化性价比与服务体系深度复盘
大数据·人工智能
腻害兔2 小时前
【若依项目-产品经理视角】深度拆解 RuoYi-Vue-Pro 商城模块:从商品管理到交易引擎,50 张表撑起一整套电商系统
java·大数据·vue.js·产品经理·ai编程
GIR1232 小时前
官方出品 | 多通道土壤呼吸测量系统市场现状与十五五规划深度报告:行业分析+趋势预测全收录
大数据·人工智能·机器学习
南讯股份Nascent4 小时前
洽洽全域会员项目启动会圆满召开
大数据·人工智能
大郭鹏宇4 小时前
基于 LangGraph 构建智能分诊系统(一):项目概述与环境搭建
大数据·人工智能·microsoft·langchain
阿里云大数据AI技术7 小时前
阿里云 ES AI 引擎版:面向 Agent 场景,为亿级租户、千亿规模向量设计的搜索引擎
人工智能·elasticsearch·agent
天天爱吃肉82188 小时前
【电源拆解:跟着问答逐一认识开关适配器PCB元器件】
大数据·人工智能·python·功能测试·嵌入式硬件·汽车
阿里云大数据AI技术8 小时前
FalconSeek 技术解析:阿里云 Elasticsearch 云原生内核如何让查询性能飙升600%
人工智能·elasticsearch
Elastic 中国社区官方博客8 小时前
将你的 Grafana Kubernetes 仪表板迁移到 Elastic Observability:相同的 PromQL,30 倍更快的查询
大数据·人工智能·elasticsearch·搜索引擎·容器·kubernetes·grafana
abcy0712138 小时前
storm核心实时机制
大数据·storm