【Elasticsearch】关键数据类型

forestsea2024-12-15 9:22

🧑 博主简介：CSDN博客专家 ，历代文学网 （PC端可以访问：https://literature.sinhy.com/#/?__c=1000，移动端可微信小程序搜索"历代文学 "）总架构师，15年工作经验，精通Java编程，高并发设计，Springboot和微服务，熟悉Linux，ESXI虚拟化以及云原生Docker和K8s，热衷于探索科技的边界，并将理论知识转化为实际应用。保持对新技术的好奇心，乐于分享所学，希望通过我的实践经历和见解，启发他人的创新思维。在这里，我希望能与志同道合的朋友交流探讨，共同进步，一起在技术的世界里不断学习成长。
技术合作 请加本人wx（注明来自csdn ）：foreast_sea

【Elasticsearch】关键数据类型

一、引言

在当今大数据和实时数据处理的时代，Elasticsearch作为一款强大的开源搜索和分析引擎，正发挥着越来越重要的作用。无论是在日志分析、全文搜索、商业智能还是监控系统等众多领域，Elasticsearch都展现出了卓越的性能和灵活性。

Elasticsearch中的数据类型是构建高效索引和准确搜索的基石。正确理解和运用这些数据类型，可以使我们在处理各种数据场景时游刃有余。例如，在一个电商平台的搜索功能中，我们需要对商品的名称 （字符串类型）、价格 （数值类型）、库存数量 （数值类型）、上架时间 （日期类型）等不同类型的数据进行索引和搜索。如果我们将价格存储为字符串类型，那么在进行价格范围搜索等操作时就会变得非常复杂且效率低下。再比如，在日志分析系统中，日志中的时间戳 （日期类型）、错误代码 （整数类型）、日志消息 （字符串类型）等数据也需要根据其类型特点进行合理的处理，才能实现快速的查询和分析。

在本文，我们将研究Elasticsearch的关键数据类型，不仅能帮助我们优化数据存储和搜索性能，还能让我们更好地设计数据模型，以满足各种复杂的业务需求。接下来，我们将详细介绍Elasticsearch中的一些关键数据类型。

二、Elasticsearch 简介

Elasticsearch 是一个基于 Lucene 库的开源搜索引擎，它提供了分布式的全文搜索功能，具有高可用性、可扩展性和易于使用等特点。通过简单的 RESTful API，用户可以轻松地将数据存储到 Elasticsearch 中，并进行复杂的搜索查询和数据分析。

三、Maven 依赖配置

在使用 Elasticsearch 的 Java 客户端时，我们需要在项目的 pom.xml 文件中添加相应的依赖。以下是使用 Elasticsearch 7.14.0 版本的依赖示例：

xml 复制代码 
<dependency>
    <groupId>org.elasticsearch.client</groupId>
    <artifactId>elasticsearch-rest-high-level-client</artifactId>
    <version>7.14.0</version>
</dependency>
<dependency>
    <groupId>org.elasticsearch</groupId>
    <artifactId>elasticsearch</artifactId>
    <version>7.14.0</version>
</dependency>

上述依赖中，elasticsearch-rest-high-level-client 提供了高级别的 REST 客户端，方便我们与 Elasticsearch 进行交互，执行各种操作，如索引创建、文档插入、搜索查询等。而 elasticsearch 核心库则是整个 Elasticsearch 功能的基础，包含了数据存储、索引管理、搜索算法等核心组件。

四、文本类型（Text）

  1. 主要作用

    • 文本类型是用于全文搜索的主要数据类型。它会对输入的文本进行分析，将文本分解为单个的词项（term），并进行索引。这使得我们可以对文本内容进行模糊搜索、关键词搜索等操作。例如，在一个文档管理系统中，对文档内容进行搜索时，文本类型就非常适用。

  2. 应用场景

    • 适用于存储和搜索长文本内容，如文章、博客、产品描述等。在搜索引擎中，当用户输入关键词查询相关文章时，文本类型的数据能够快速匹配包含这些关键词的文档。

  3. 索引创建

    java 复制代码 
    // 假设使用Java High - Level REST Client创建索引
import org.elasticsearch.action.admin.indices.create.CreateIndexRequest;
import org.elasticsearch.client.RequestOptions;
import org.elasticsearch.client.RestHighLevelClient;
// 创建索引请求
CreateIndexRequest request = new CreateIndexRequest("my_index");
// 定义映射，设置文本类型字段
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"article_content\": {\n" +
    "      \"type\": \"text\"\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
// 执行创建索引操作
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 这里的restHighLevelClient是已经初始化的Elasticsearch客户端
// 注释：首先创建了一个CreateIndexRequest对象，指定要创建的索引名为my_index。
// 然后通过mapping方法定义了索引的映射，其中article_content字段被设置为text类型。
// 最后使用restHighLevelClient执行创建索引的操作。

  4. 搜索示例

    java 复制代码 
    import org.elasticsearch.action.search.SearchRequest;
import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.client.RequestOptions;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.builder.SearchSourceBuilder;
// 创建搜索请求
SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
// 使用文本类型的查询构建器进行查询
sourceBuilder.query(QueryBuilders.matchQuery("article_content", "keyword"));
request.source(sourceBuilder);
// 执行搜索操作
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建SearchRequest对象指定要搜索的索引my_index。
// 然后构建SearchSourceBuilder，使用matchQuery查询article_content字段中包含keyword的文档。
// 最后执行搜索操作并获取SearchResponse。

五、关键字类型（Keyword）

  1. 主要作用

    • 关键字类型是精确值类型。它不会对输入的值进行分析，直接将整个值作为一个单独的词项进行索引。这对于像身份证号、订单号等需要精确匹配的值非常有用。

  2. 应用场景

    • 在数据库中存储唯一标识符，如用户ID、产品ID等。在进行数据关联查询或者精确查找特定记录时，关键字类型能够确保准确无误的匹配。例如，在用户登录系统中，通过用户ID（关键字类型）来精确查找用户信息。

  3. 索引创建

    java 复制代码 
    CreateIndexRequest request = new CreateIndexRequest("my_index");
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"user_id\": {\n" +
    "      \"type\": \"keyword\"\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 注释：创建索引请求，在映射中设置user_id字段为keyword类型，然后创建索引。

  4. 搜索示例

    java 复制代码 
    SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(QueryBuilders.termQuery("user_id", "12345"));
request.source(sourceBuilder);
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建搜索请求，使用termQuery对user_id字段进行精确查询，查找user_id为12345的文档。

六、数值类型（Numeric Types）

  1. 主要作用

    • Elasticsearch支持多种数值类型，如long、integer、short、byte、double、float等。这些数值类型用于存储和处理各种数值数据，支持数值的比较、范围查询等操作。

  2. 应用场景

    • 在金融系统中存储账户余额（double类型）、在库存管理系统中存储商品数量（integer类型）等。例如，在一个价格比较网站上，对商品价格（double类型）进行范围搜索，查找价格在某个区间内的商品。

  3. 索引创建

    java 复制代码 
    CreateIndexRequest request = new CreateIndexRequest("my_index");
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"product_price\": {\n" +
    "      \"type\": \"double\"\n" +
    "    },\n" +
    "    \"product_count\": {\n" +
    "      \"type\": \"integer\"\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 注释：创建索引请求，设置product_price字段为double类型，product_count字段为integer类型并创建索引。

  4. 搜索示例

    java 复制代码 
    SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(QueryBuilders.rangeQuery("product_price").from(10.0).to(20.0));
request.source(sourceBuilder);
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建搜索请求，使用rangeQuery对product_price字段进行范围查询，查找价格在10.0到20.0之间的商品。

七、日期类型（Date）

  1. 主要作用

    • 日期类型用于存储日期和时间相关的数据。Elasticsearch能够对日期类型进行有效的索引，支持按照日期范围进行搜索、排序等操作。

  2. 应用场景

    • 在日志分析系统中存储日志的时间戳，在事件管理系统中存储事件发生的时间。例如，在分析网站流量日志时，按日期范围查询特定时间段内的流量数据。

  3. 索引创建

    java 复制代码 
    CreateIndexRequest request = new CreateIndexRequest("my_index");
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"log_timestamp\": {\n" +
    "      \"type\": \"date\"\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 注释：创建索引请求，设置log_timestamp字段为date类型并创建索引。

  4. 搜索示例

    java 复制代码 
    SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(QueryBuilders.rangeQuery("log_timestamp").from("2023 - 01 - 01").to("2023 - 02 - 01"));
request.source(sourceBuilder);
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建搜索请求，使用rangeQuery对log_timestamp字段进行日期范围查询，查找2023年1月1日到2023年2月1日之间的日志。

八、布尔类型（Boolean）

  1. 主要作用

    • 布尔类型用于存储真或假的值。它在处理逻辑判断相关的数据时非常有用，例如表示某个功能是否启用、某个条件是否满足等。

  2. 应用场景

    • 在用户权限管理系统中，表示用户是否具有某个权限（true或false）。在系统配置中，表示某个配置项是否被激活。

  3. 索引创建

    java 复制代码 
    CreateIndexRequest request = new CreateIndexRequest("my_index");
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"is_feature_enabled\": {\n" +
    "      \"type\": \"boolean\"\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 注释：创建索引请求，设置is_feature_enabled字段为boolean类型并创建索引。

  4. 搜索示例

    java 复制代码 
    SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(QueryBuilders.termQuery("is_feature_enabled", true));
request.source(sourceBuilder);
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建搜索请求，使用termQuery查询is_feature_enabled字段为true的文档。

九、数组类型（Array）

  1. 主要作用

    • 数组类型允许在一个字段中存储多个值。这些值可以是相同的数据类型（如多个字符串、多个数值等）。它在存储具有多个相关值的情况时非常有用，例如一个用户的多个兴趣爱好（字符串数组）。

  2. 应用场景

    • 在社交网络系统中，存储用户的多个好友ID（整数数组）。在内容管理系统中，存储文章的多个标签（字符串数组）。

  3. 索引创建

    java 复制代码 
    CreateIndexRequest request = new CreateIndexRequest("my_index");
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"user_friends\": {\n" +
    "      \"type\": \"integer\",\n" +
    "      \"index\": true\n" +
    "    },\n" +
    "    \"article_tags\": {\n" +
    "      \"type\": \"keyword\",\n" +
    "      \"index\": true\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 注释：创建索引请求，设置user_friends字段为可索引的整数类型，article_tags字段为可索引的keyword类型，用于存储数组。

  4. 搜索示例

    java 复制代码 
    SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(QueryBuilders.termsQuery("article_tags", "tag1", "tag2"));
request.source(sourceBuilder);
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建搜索请求，使用termsQuery查询article_tags字段包含tag1或tag2的文档。

十、对象类型（Object）

  1. 主要作用

    • 对象类型用于存储嵌套的结构化数据。它可以将一个复杂的对象结构存储在一个字段中，并且可以对嵌套对象中的字段进行索引和搜索。

  2. 应用场景

    • 在订单管理系统中，一个订单对象可能包含订单详情（如商品信息、数量、价格等），这些可以作为嵌套对象存储。在员工管理系统中，员工的地址信息（包含街道、城市、邮编等）可以作为嵌套对象存储在员工信息中。

  3. 索引创建

    java 复制代码 
    CreateIndexRequest request = new CreateIndexRequest("my_index");
request.mapping("{\n" +
    "  \"properties\": {\n" +
    "    \"order\": {\n" +
    "      \"type\": \"object\",\n" +
    "      \"properties\": {\n" +
    "        \"product\": {\n" +
    "          \"type\": \"keyword\"\n" +
    "        },\n" +
    "        \"quantity\": {\n" +
    "          \"type\": \"integer\"\n" +
    "        },\n" +
    "        \"price\": {\n" +
    "          \"type\": \"double\"\n" +
    "        }\n" +
    "      }\n" +
    "    }\n" +
    "  }\n" +
    "}", XContentType.JSON);
restHighLevelClient.indices().create(request, RequestOptions.DEFAULT);
// 注释：创建索引请求，设置order字段为object类型，并定义其嵌套的product、quantity和price字段的类型，然后创建索引。

  4. 搜索示例

    java 复制代码 
    SearchRequest request = new SearchRequest("my_index");
SearchSourceBuilder sourceBuilder = new SearchSourceBuilder();
sourceBuilder.query(QueryBuilders.matchQuery("order.product", "product_name"));
request.source(sourceBuilder);
SearchResponse response = restHighLevelClient.search(request, RequestOptions.DEFAULT);
// 注释：创建搜索请求，使用matchQuery查询order对象中的product字段包含product_name的文档。

十一、总结

Elasticsearch 的关键数据类型为我们提供了丰富的工具来存储和处理各种类型的数据，无论是结构化数据还是非结构化数据，都能找到合适的数据类型进行高效的存储和检索。在实际应用中，根据数据的特点和业务需求，合理选择和使用这些数据类型，能够优化索引结构，提高搜索性能，从而为用户提供快速、准确的搜索结果和数据分析能力。

通过本文的介绍，我们详细了解了 Elasticsearch 中常见的数据类型，包括它们的作用、应用场景以及代码示例。希望这些知识能够帮助您更好地运用 Elasticsearch 解决实际的数据存储和搜索问题，为构建强大的搜索应用奠定坚实的基础。

十二、参考资料文献

  • Elasticsearch 官方文档：Elasticsearch 官方提供的详细文档，涵盖了数据类型、API 使用、索引管理等各个方面的权威信息。
  • [Elasticsearch in Action》（作者：Radim Kacer、Jan Zahálka）：一本深入讲解 Elasticsearch 的书籍，通过实际案例和代码示例，详细介绍了 Elasticsearch 的各种功能和应用场景，对于深入理解数据类型和其他核心概念非常有帮助。
  • 在线技术博客和论坛：如 Elasticsearch 官方社区论坛、Stack Overflow 等，这些平台上有大量开发者分享的实际经验和问题解决方案，能够帮助我们解决在使用 Elasticsearch 过程中遇到的各种疑难问题，同时也能获取到一些关于数据类型应用的最佳实践案例。
相关推荐
Elasticsearch34 分钟前
Elasticsearch：ES|QL 中的全文搜索 - 8.17
elasticsearch
摇光~1 小时前
【Linux金典面试题（上）】41道Linux金典面试问题+详细解答，包含基本操作、系统维护、网络配置、脚本编程等问题。
大数据·linux·网络·面试
AI_Mind1 小时前
浅谈大模型之Agent(下篇)
大数据·人工智能·深度学习
奥顺2 小时前
从零开始：PHP基础教程系列-第5篇：函数的定义与使用
大数据·mysql·开源·php
烟雨平生95272 小时前
Hadoop概述
大数据·hadoop·分布式
小麦项目管理指南3 小时前
如何构建江苏省建筑施工安全管理系统？
大数据·运维·安全·自动化·项目管理
哎呦没3 小时前
解析 SSM 垃圾分类系统，助力生态平衡
大数据·开发语言·php
Elastic 中国社区官方博客4 小时前
如何将你的 Ruby 应用程序从 OpenSearch 迁移到 Elasticsearch
大数据·开发语言·数据库·后端·elasticsearch·搜索引擎·ruby
热门推荐
01WPS-0DAY-20230809的分析和利用复现02玄机平台应急响应—webshell查杀03(欧拉)openEuler系统添加网卡文件配置流程、(欧拉)openEuler系统手动配置ipv6地址流程、(欧拉)openEuler系统网络管理说明04游戏内存优化05MacBook外接键盘修改键位06Docker 夺命连环 15 问07如何解决电脑无声问题：排除故障的几种常见方法08【凡人修仙传_01】散修厉飞羽是如何出师未捷身先死的！09PyTorch机器学习实现液态神经网络10文心一言最新重磅发布！