【Elasticsearch】filter聚合

在Elasticsearch中,Filter聚合是一种单桶聚合,用于根据特定的查询条件筛选文档,并对筛选后的文档集合进行进一步的聚合分析。它允许用户在执行聚合操作之前,先过滤出符合某些条件的文档,从而更精确地分析数据。

Filter聚合的核心概念

  1. 过滤条件:

• Filter聚合通过一个查询(如`term`、`range`、`bool`等)来定义过滤条件。

• 只有满足这些条件的文档才会被包含在聚合结果中。

  1. 子聚合:

• Filter聚合可以包含子聚合,这些子聚合仅对过滤后的文档集合进行计算。

• 这使得用户可以在特定的文档子集中进行更复杂的分析。

  1. 性能优势:

• Filter聚合在内部进行了优化,比直接在查询中使用`filter`子句更高效。

• 它特别适合于需要对特定文档子集进行多次聚合分析的场景。

Filter聚合的语法

Filter聚合的基本语法如下:

```json

{

"aggs": {

"<aggregation_name>": {

"filter": {

"<query>": {

"<query_definition>": ...

}

},

"aggs": {

"<sub_aggregation_name>": {

"<sub_aggregation_type>": {

"<sub_aggregation_definition>": ...

}

}

}

}

}

}

```

• `<aggregation_name>`:自定义的聚合名称。

• `<query>`:定义过滤条件的查询类型(如`term`、`range`等)。

• `<query_definition>`:具体的查询定义。

• `<sub_aggregation_name>`:子聚合的名称。

• `<sub_aggregation_type>`:子聚合的类型(如`avg`、`sum`、`max`等)。

• `<sub_aggregation_definition>`:子聚合的具体定义。

示例:计算特定类型商品的平均价格

假设我们有一个`sales`索引,其中包含不同类型的销售记录,我们希望计算所有T恤的平均价格。可以使用以下Filter聚合:

```json

POST /sales/_search?size=0&filter_path=aggregations

{

"aggs": {

"t_shirts": {

"filter": {

"term": {

"type": "t-shirt"

}

},

"aggs": {

"avg_price": {

"avg": {

"field": "price"

}

}

}

}

}

}

```

响应结果

```json

{

"aggregations": {

"t_shirts": {

"doc_count": 3,

"avg_price": {

"value": 128.33333333333334

}

}

}

}

```

• `doc_count`:表示过滤后的文档数量(即T恤的数量)。

• `avg_price`:表示这些T恤的平均价格。

使用顶级`query`限制所有聚合

如果需要对所有聚合操作的文档集合进行限制,可以使用顶级`query`。这比使用Filter聚合更高效,因为它在聚合之前就过滤了文档。

例如,如果只想对T恤进行聚合分析,可以使用以下方式:

```json

POST /sales/_search?size=0&filter_path=aggregations

{

"query": {

"term": {

"type": "t-shirt"

}

},

"aggs": {

"avg_price": {

"avg": {

"field": "price"

}

}

}

}

```

使用`filters`聚合进行多过滤器分组

如果需要对多个过滤条件进行分组分析,可以使用`filters`聚合。这比多个单独的Filter聚合更高效。

例如,同时计算帽子和T恤的平均价格:

```json

POST /sales/_search?size=0&filter_path=aggregations

{

"aggs": {

"f": {

"filters": {

"filters": {

"hats": {

"term": {

"type": "hat"

}

},

"t_shirts": {

"term": {

"type": "t-shirt"

}

}

}

},

"aggs": {

"avg_price": {

"avg": {

"field": "price"

}

}

}

}

}

}

```

响应结果

```json

{

"aggregations": {

"f": {

"buckets": {

"hats": {

"doc_count": 2,

"avg_price": {

"value": 100.5

}

},

"t_shirts": {

"doc_count": 3,

"avg_price": {

"value": 128.33333333333334

}

}

}

}

}

}

```

总结

• Filter聚合:用于根据特定条件筛选文档,并对筛选后的文档进行聚合分析。

• 性能优化:使用顶级`query`限制所有聚合操作的文档集合,或使用`filters`聚合对多个过滤条件进行分组分析,可以提高性能。

• 应用场景:适用于需要对特定文档子集进行多次聚合分析的场景,例如按产品类型、价格范围等进行分组分析。

通过合理使用Filter聚合,可以更高效地对Elasticsearch中的数据进行分析和挖掘。

相关推荐
Elasticsearch1 天前
ES8 向量功能窥探系列(二):向量数据的存储与优化
elasticsearch
安审若无1 天前
Elasticsearch中的监控(Monitoring)功能介绍
elasticsearch·搜索引擎·全文检索
leo_hush1 天前
elasticsearch基本操作笔记
elasticsearch
咸鱼求放生2 天前
es在Linux安装
大数据·elasticsearch·搜索引擎
xyhshen2 天前
k8s下离线搭建elasticsearch
elasticsearch·容器·kubernetes
@泽栖2 天前
ES数据聚合
elasticsearch·搜索引擎
張萠飛2 天前
Linux下如何使用shell脚本导出elasticsearch中某一个index的数据为本地csv文件
linux·运维·elasticsearch
LanLance2 天前
ES101系列09 | 运维、监控与性能优化
java·运维·后端·elasticsearch·云原生·性能优化·golang
疯狂的沙粒2 天前
如何通过git命令查看项目连接的仓库地址?
大数据·git·elasticsearch
IT成长日记2 天前
Elasticsearch集群手动分片分配指南:原理与实践
大数据·elasticsearch·手动分片分配