【Elasticsearch】一、概述,安装

文章目录

概述

ES是开源的高扩展的分布式全文搜索引擎,实时的存储、检索数据;本身扩展性很好,可以扩展到上百台服务器,处理 PB 级别的数据。

全文搜索引擎

Google,百度类的网站搜索,它们都是根据网页中的关键字生成索引,我们在搜索的时候输入关键字,它们会将该关键字即索引匹配到的所有网页返回;还有常见的项目中应用日志的搜索等等。对于这些非结构化的数据文本,关系型数据库搜索不是能很好的支持。

一般传统数据库,全文检索都实现的很鸡肋,因为一般也没人用数据库存文本字段。进行全文检索需要扫描整个表,如果数据量大的话即使对 SQL 的语法优化,也收效甚微。建立了索引,但是维护起来也很麻烦,对于 insert 和 update 操作都会重新构建索引。

基于以上原因可以分析得出,在一些生产环境中,使用常规的搜索方式,性能是非常差的:

  1. 搜索的数据对象是大量的非结构化的文本数据。
  2. 文件记录量达到数十万或数百万个甚至更多。
  3. 支持大量基于交互式文本的查询。
  4. 需求非常灵活的全文搜索查询。
  5. 对高度相关的搜索结果的有特殊需求,但是没有可用的关系数据库可以满足。
  6. 对不同记录类型、非文本数据操作或安全事务处理的需求相对较少的情况。
    为了解决结构化数据搜索和非结构化数据搜索性能问题,我们就需要专业,健壮,强大的全文搜索引擎

这里说到的全文搜索引擎指的是目前广泛应用的主流搜索引擎。它的工作原理是计算机索引程序通过扫描文章中的每一个词,对每一个词建立一个索引,指明该词在文章中出现的次数和位置,当用户查询时,检索程序就根据事先建立的索引进行查找,并将查找的结果反馈给用户的检索方式。这个过程类似于通过字典中的检索字表查字的过程。

概述ES(7.x)

Elasticsearch 是面向文档型数据库,一条数据在这里就是一个文档。为了方便大家理解,我们将 Elasticsearch 里存储文档数据和关系型数据库 MySQL 存储数据的概念进行一个类比

ES 里的 Index 可以看做一个库,而 Types 相当于表,Documents 则相当于表的行。这里 Types 的概念已经被逐渐弱化,Elasticsearch 6.X 中,一个 index 下已经只能包含一个type,Elasticsearch 7.X 中, Type 的概念已经被删除了。

安装ES(Docker)

shell 复制代码
# 创建网络
docker network create elastic

# 拉取镜像
docker pull elasticsearch:8.14.1

# 运行实例:--net上面创建的网络,
docker run -d --name elasticsearch --net elastic -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" docker.elastic.co/elasticsearch/elasticsearch:8.14.1

测试,是否启动成功

注意! es8.0以上默认开启了 ssl 认证

直接访问 : http://127.0.0.1:9200 是无法访问的,需要访问 https,或者关闭 SSL认证

自Elasticsearch 7.8.0版本开始,Elasticsearch 不再提供默认的用户名和密码。相反,它采用了内置安全特性,并引入了超级用户(superuser)角色和内置用户(built-in users)概念来管理访问控制。

在新安装的情况下,您需要设置一个初始的内置用户以及相关的登录凭据。可以通过修改 Elasticsearch 的配置文件(elasticsearch.yml)来完成此操作。以下是一个示例:

Docker ElastIcSearch容器配置文件路径

进入容器

shell 复制代码
docker exec -it elasticsearch bash

找到配置文件路径

shell 复制代码
cd  /usr/share/elasticsearch/config

打开 elasticsearch.yml 文件 找到 xpack.security.enabled: true 改为 xpack.security.enabled: false,这样就可以直接 使用http访问,并且不需要账号密码鉴权,这个设置看个人情况,如果是生产环境建议开始开启 https和账号密码鉴权

重启容器

shell 复制代码
docker restart some-elasticsearch

访问 http://127.0.0.1:9200

可视化工具

https://www.elastic.co/cn/downloads/kibana

解压使用启动脚本

shell 复制代码
# Windows
/bin/kibana.bat
# Linux
/bin/kibana

浏览器运行

shell 复制代码
http://localhost:5601

遇到这个

按照提示路径bin\kibana-verification-code.bat运行获得code

配置中文

进入容器

shell 复制代码
docker exec -it kibana /bin/bash

找到配置文件路径

shell 复制代码
# Linux
cd  /usr/share/kibana/config
# Win
./bin/config

打开 kibana.yml 文件 增加 csp.strict: false 设置 CSP 启用 Kibana 模式,如果为 true那么会对浏览器进行安全检查,官方CSP配置说明

增加i18n.locale: "zh-CN" 配置中文

elasticsearch.hosts: [ "http://elasticsearch:9200" ] 改为 具体 Elasticsearch 通信地址

重启kibana后

客户端

Postman下载

https://www.getpostman.com/

相关推荐
阿里云大数据AI技术14 分钟前
【跨国数仓迁移实践9】dbt‑maxcompute 在 GoTerra 迁移过程中的落地与技术贡献
大数据
的小姐姐15 分钟前
RMS设备检修管理系统_HawkEye智能运维平台_璞华大数据
大数据·运维
不会聊天真君64733 分钟前
ES(springcloud笔记第五期)
笔记·elasticsearch·spring cloud
时空自由民.33 分钟前
repo 学习教程
大数据·学习·elasticsearch
刘一说34 分钟前
Elasticsearch HTTPS访问错误解决指南
大数据·elasticsearch·https
橙*^O^*安2 小时前
Kubernetes集群部署Jenkins指南
云原生·容器·kubernetes·jenkins·devops
Frank_zhou2 小时前
Easy-Es 架构设计详解
后端·elasticsearch
华略创新2 小时前
引入外部咨询顾问,提供专业指导——制造企业大型系统项目的明智之选
大数据·制造·crm·erp系统·企业管理软件
时序数据说3 小时前
物联网时序数据管理的利器:为何IoTDB备受青睐?
大数据·数据库·物联网·时序数据库·iotdb
零千叶3 小时前
【面试】Elasticsearch 实战面试问题
elasticsearch