es 倒排索引

es 倒排索引TRee

倒排索引树(TRee)通常指的是Elasticsearch中用于支持高速搜索的一种数据结构。它是一种树状结构,可以通过特定的词项(terms)来快速定位包含这些词项的文档。

在Elasticsearch中,倒排索引树是用于文本字段的,它允许你根据词项快速查询包含这些词项的文档。这是通过以下步骤实现的:

  1. 分词:文本内容被分解成独立的词项(tokens)。

  2. 索引词项:为每个词项创建一个节点,并链接到包含该词项的文档ID列表。

  3. 构建树:将词项节点组织成树形结构,通常是为了优化搜索效率,如通过前缀组织词项以支持模糊查询。

由于Elasticsearch是基于Lucene的,实际上是Lucene提供了倒排索引的结构和算法。在Elasticsearch中,你不需要直接操作倒排索引树,因为这些是由Elasticsearch的索引过程在后台自动创建的。

复制代码
// 假设有以下文档集合:
// doc1: "quick brown fox"
// doc2: "quick brown fox"
// doc3: "quick red rabbit"
// doc4: "jumped over the lazy dog"
 
// 创建一个倒排索引树
TRee invertedIndexTree = new TRee();
 
// 对每个文档进行分词,并为每个词项创建节点
for(Document doc : documents) {
    for(String token : doc.tokens) {
        //token 是分词   doc.id是es中文的的id
        invertedIndexTree.addToken(token, doc.id);
    }
}
 
// 现在可以根据词项快速查询包含这些词项的文档了
List<Integer> docIds = invertedIndexTree.search("quick"); // 返回 [doc1, doc2, doc3]

luence中可以自定义倒排索引的数据接口

相关推荐
Elasticsearch19 分钟前
使用 OpenLit、 OpenTelemetry 和 Elastic 的 AI Agent 可观测性
elasticsearch
阿里云大数据AI技术37 分钟前
1TB数据,ES却收到了2TB?揪出那个客户端中的“隐形复读机”
大数据·elasticsearch
初恋叫萱萱1 小时前
【TextIn大模型加速器 + 火山引擎】文件智能体构建全路径指南
大数据·数据库·火山引擎
安达发公司1 小时前
安达发|效率革命:APS自动排程,为“金属丛林”安装精准导航
大数据·运维·人工智能·aps高级排程·aps排程软件·安达发aps·aps自动排程
科士威传动2 小时前
精密仪器中的微型导轨如何选对润滑脂?
大数据·运维·人工智能·科技·机器人·自动化
Lion Long2 小时前
大数据时代的“时间”难题:时序数据库(TSDB)选型避坑指南
大数据·数据库·时序数据库·数据库架构·iotdb·tsdb
dixiuapp2 小时前
智能报修系统从连接到预测的价值跃迁
大数据·人工智能·物联网·sass·工单管理系统
星月心城2 小时前
git提交代码时所遇问题
大数据·git·elasticsearch
天远数科2 小时前
Go语言金融风控:天远 全能小微企业报告组合接口的 AES 加密与异构 JSON 解析
大数据·golang·json
hzp6662 小时前
高内存压力下提升系统响应速度、改善用户体验
大数据·数据存储·archer