Kibana可视化Dashboard如何基于字段是否包含某关键词进行过滤

kinana是一个功能强大、可对Elasticsearch数据进行可视化的开源工具。

我们在dashboard创建可视化时,有时需要将某个index里数据的某个字段根据是否包含某些特定关键词进行过滤,这个时候就可以用到lens里的filter功能很方便地进行操作。

如上图所示,一个名为 formatted-logs的index数据用于检索,我选择了三个字段构成图中的表格,分别是 hostname, abstract 和 log.keyword。

需求一:

将 log.keyword 字段中包含 "No. of IPv6 Unicast prefixes received from" 字符串的行数筛选出来。

操作:

点击 "添加筛选",选择 log.keyword 字段,在运算符处选择 "是",然后在"值"一栏填入"No. of IPv6 Unicast prefixes received from *",因为我们是要匹配包含某字符串的字段内容而不是精确查找,填写完成后点击"保存",然后会发现一个问题,就是找不到结果。

这个时候再点击刚刚创建的filter标签,点击"编辑筛选"。

点击"编辑为查询DSL",DSL是ES提供的一种灵活的、基于 JSON 的查询语言。

这个时候可以看到实际用来查询的DSL,可以发现用到的检索是精确匹配,用的是"match_phrase", 我们希望能够用*进行模糊匹配,所以要把检索方式换成"wildcard"

将精确匹配的"match_phrase"换成支持模糊匹配的"wildcard",然后再点击"保存"

保存之后,就可以看到所有选择的时间范围内包含 "No. of IPv6 Unicast prefixes received from *" 字符串的日志数据了。

需求二:

将 log.keyword 字段中包含 "No. of IPv6 Unicast prefixes received from" 字符串的日志数据过滤掉。

操作:

将包含某指定字符串的数据行过滤掉不显示在表格内容中,其实就是在实现需求一所用到的ES查询DSL中进行反向操作。

这个时候可以使用 bool 查询中的 must_not 子句。must_not 子句用于排除与特定条件匹配的字段所在行数据(谢谢ChatGPT的倾情解答)。

那么将DSL调整为如下即可:

这个时候再更新检索结果,就可以看到log.keyword 字段中不包含 "No. of IPv6 Unicast prefixes received from" 字符串的日志数据。

最后的温馨tips: DSL 可以使用AI工具帮忙生成!!再次感谢ChatGPT。

相关推荐
李白你好7 小时前
AI Agent 架构的自动化渗透测试工具
运维·人工智能·自动化
一勺菠萝丶8 小时前
Docker Desktop 启动后容器自动启动怎么办?如何关闭容器自启动
运维·docker·容器
ylscode9 小时前
Comodo防火墙曝致命零日漏洞:单个IPv6数据包即可触发Windows蓝屏死机
运维·网络·windows·安全·安全威胁分析
实在智能RPA9 小时前
药企GMP合规自动化破局:实在Agent的功能完整度评估与落地实践
运维·人工智能·ai·自动化
Shota Kishi10 小时前
SLV 新增 allnodes-jito 支持:Solana 验证者多客户端运维与 AI agent 自动化解析
运维·自动化·区块链
hj28625111 小时前
linux下一步学习内容
linux·运维
睡不醒男孩03082311 小时前
数据库高可用运维实操指南:基于CLup的PostgreSQL生产环境自动化管理
运维·数据库·postgresql
V搜xhliang024612 小时前
临床科研新范式:从选题到投稿,AI智能体如何接管全流程?
运维·数据结构·人工智能·算法·microsoft·数据挖掘·自动化
tudoSearcher12 小时前
日志、指标、链路追踪:可观测性三支柱深度解析
运维·服务器·网络·prometheus
xier_ran12 小时前
【infra之路】Linux基础命令与系统排查
linux·运维·服务器