es 倒排索引

es 倒排索引TRee

倒排索引树(TRee)通常指的是Elasticsearch中用于支持高速搜索的一种数据结构。它是一种树状结构,可以通过特定的词项(terms)来快速定位包含这些词项的文档。

在Elasticsearch中,倒排索引树是用于文本字段的,它允许你根据词项快速查询包含这些词项的文档。这是通过以下步骤实现的:

  1. 分词:文本内容被分解成独立的词项(tokens)。

  2. 索引词项:为每个词项创建一个节点,并链接到包含该词项的文档ID列表。

  3. 构建树:将词项节点组织成树形结构,通常是为了优化搜索效率,如通过前缀组织词项以支持模糊查询。

由于Elasticsearch是基于Lucene的,实际上是Lucene提供了倒排索引的结构和算法。在Elasticsearch中,你不需要直接操作倒排索引树,因为这些是由Elasticsearch的索引过程在后台自动创建的。

复制代码
// 假设有以下文档集合:
// doc1: "quick brown fox"
// doc2: "quick brown fox"
// doc3: "quick red rabbit"
// doc4: "jumped over the lazy dog"
 
// 创建一个倒排索引树
TRee invertedIndexTree = new TRee();
 
// 对每个文档进行分词,并为每个词项创建节点
for(Document doc : documents) {
    for(String token : doc.tokens) {
        //token 是分词   doc.id是es中文的的id
        invertedIndexTree.addToken(token, doc.id);
    }
}
 
// 现在可以根据词项快速查询包含这些词项的文档了
List<Integer> docIds = invertedIndexTree.search("quick"); // 返回 [doc1, doc2, doc3]

luence中可以自定义倒排索引的数据接口

相关推荐
财迅通Ai2 小时前
MLCC业务爆发式增长,带动昀冢科技三季度扭亏为盈
大数据·人工智能·科技·昀冢科技
PaperAccept2 小时前
【研知有术论文发表】材料科学一区期刊,影响因子30+的纳米科技SCI,审稿严格但有效率
大数据·数据结构·科技·量子计算
跨境卫士—小依3 小时前
TikTokShop旧版物流模板组件停用跨境技术团队如何完成系统迁移
大数据·人工智能·新媒体运营·跨境电商·跨境·营销策略
阿俊-全栈开发3 小时前
LikeShop 多商户标准版智能商品分类与标签自动打标:大模型+向量检索二开实践
大数据·人工智能·分类·likeshop·likeshop开源商城
全栈陈序员3 小时前
【Git】从入门到精通(三)—— 创建第一个Git仓库
大数据·git·elasticsearch
首席数智官3 小时前
Agent进入产业,腾讯云重新定义AI生态价值
大数据·人工智能
Elasticsearch3 小时前
我们的 agent 技能如何调研、构建和测试完整的 Elastic 集成
elasticsearch
无心水3 小时前
20、大数据架构设计理论与实践 核心考点与学习笔记
大数据·笔记·学习·架构师·系统架构设计师·软考系统架构设计师·架构设计师
chaoyuanl3 小时前
超元力玻璃剧场:裸眼3D、8K高清与悬空栈桥的成熟文旅解决方案
大数据·人工智能·3d·xr·vr
程序员梅雨3 小时前
【从零开始学习数据仓库 | 第三篇】: Flume——数据采集基石
java·大数据·数据仓库·后端·学习·flume