2024.2.25 -ElasticSearch 进阶

倒排索引

Elasticsearch的倒排索引机制是通过将文档中出现的词汇与它们所在的文档ID关联起来,实现快速查找包含特定词汇的文档。下面是一个具体的例子来说明倒排索引的工作原理:

假设我们有一个简单的文章集合,包含以下三篇文章:

  1. 文章A:标题为"新冠病毒疫情最新动态",内容为"关于全球COVID-19疫情的最新进展报告"

  2. 文章B:标题为"春季流感预防措施",内容为"如何在春季有效预防流感病毒传播"

  3. 文章C:标题为"疫苗接种的重要性",内容为"讨论不同类型的疫苗及其在防疫中的关键作用"

**构建倒排索引过程:**

对于每个文档,Elasticsearch会执行以下步骤:

  • 分词(Tokenization):对文档的内容进行分词处理。例如,文章A的标题和内容分别会被分成如下的关键词:

  • 标题:"新冠"、"病毒"、"疫情"、"最新"、"动态"

  • 内容:"全球"、"COVID-19"、"疫情"、"最新"、"进展"、"报告"

  • 创建倒排索引条目:

  • 对于每个唯一词汇,记录它出现在哪些文档以及在文档中的位置信息:

  • "新冠" -> [文档A, 标题]

  • "病毒" -> [文档A, 标题], [文档A, 内容]

  • "疫情" -> [文档A, 标题], [文档A, 内容]

  • ...

  • "预防" -> [文档B, 标题]

  • "疫苗" -> [文档C, 标题]

**查询使用倒排索引:**

现在,如果我们想要搜索包含关键词"疫情"的所有文章,Elasticsearch可以直接查看倒排索引,找到关键词"疫情"对应的文档列表,即:

  • "疫情" -> [文档A, 标题], [文档A, 内容]

因此,搜索引擎立即知道文档A包含了这个词,并且可以在毫秒级的时间内返回搜索结果。

总结来说,Elasticsearch的倒排索引使得无需扫描整个文档集合就能迅速定位到含有特定词汇的文档,极大地提高了全文检索的速度和效率。

ES的架构

角色:client Esmaster

相关推荐
绿算技术3 分钟前
“强强联手,智启未来”凯创未来与绿算技术共筑高端智能家居及智能照明领域新生态
大数据·人工智能·智能家居
只因只因爆1 小时前
spark的缓存
大数据·缓存·spark
Leo.yuan2 小时前
3D 数据可视化系统是什么?具体应用在哪方面?
大数据·数据库·3d·信息可视化·数据分析
只因只因爆3 小时前
spark小任务
大数据·分布式·spark
cainiao0806053 小时前
Java 大视界——Java 大数据在智慧交通智能停车诱导系统中的数据融合与实时更新
java·大数据·开发语言
End9285 小时前
Spark之搭建Yarn模式
大数据·分布式·spark
我爱写代码?5 小时前
Spark 集群配置、启动与监控指南
大数据·开发语言·jvm·spark·mapreduce
TDengine (老段)6 小时前
什么是物联网 IoT 平台?
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
青云交6 小时前
Java 大视界 -- 基于 Java 的大数据分布式存储在工业互联网海量设备数据长期存储中的应用优化(248)
java·大数据·工业互联网·分布式存储·冷热数据管理·hbase 优化·kudu 应用
会飞的架狗师6 小时前
【SpringBoot实战指南】集成Easy ES
spring boot·elasticsearch