【Elasticsearch】映射:null_value 详解

映射:null_value 详解

null_value 是 Elasticsearch 中字段级别的参数,用于指定当字段值为 null 或字段不存在时,在索引中存储的替代值。这个功能主要用于确保 null 值可以被搜索和聚合。

1.核心支持字段类型

null_value 主要支持以下核心字段类型:

  • 数值类型
    • long
    • integer
    • short
    • byte
    • double
    • float
    • half_float
    • scaled_float
  • 字符串类型
    • keyword
    • text(需要配合 keyword 子字段使用)
  • 日期类型
    • date
  • 布尔类型
    • boolean
  • IP 类型
    • ip

2.使用注意事项

  • 类型匹配
    • null_value 必须与字段类型匹配。
    • 例如:数值字段的 null_value 必须是数字。
  • 查询影响
    • 设置的 null_value 会作为实际值被索引。
    • 查询时需要查询替代值而非真正的 null
  • 聚合影响
    • 聚合时会将这些文档归入替代值的分组。
  • 存储空间
    • 会增加索引大小,因为所有 null 都会被替换为具体值。
  • 动态映射
    • 动态映射不会自动设置 null_value,需要显式定义。

3.使用示例

3.1 数值字段示例

json 复制代码
PUT products
{
  "mappings": {
    "properties": {
      "price": {
        "type": "float",
        "null_value": 0.0
      }
    }
  }
}

3.2 字符串字段示例

json 复制代码
PUT users
{
  "mappings": {
    "properties": {
      "email": {
        "type": "keyword",
        "null_value": "unknown@example.com"
      }
    }
  }
}

3.3 日期字段示例

json 复制代码
PUT events
{
  "mappings": {
    "properties": {
      "event_date": {
        "type": "date",
        "null_value": "1970-01-01"
      }
    }
  }
}

3.4 查询示例

索引文档:

json 复制代码
PUT products/_doc/1
{
  "name": "Product A",
  "price": null  // 将被索引为 0.0
}

PUT products/_doc/2
{
  "name": "Product B"  // price 字段缺失,将被索引为 0.0
}

查询替代值:

json 复制代码
GET products/_search
{
  "query": {
    "term": {
      "price": 0.0
    }
  }
}

4.实际应用场景

  • 统一处理缺失值:确保所有文档在特定字段上都有可搜索的值。
  • 聚合分析 :使 null 值能够参与聚合计算。
  • 数据迁移 :处理源数据中可能存在的 null 值。
  • 默认值设置:为缺失字段提供业务上有意义的默认值。

5.替代方案比较

方案 优点 缺点
null_value 统一处理,可搜索可聚合 占用额外存储空间
exists 查询 不占用额外空间 只能判断存在性,不能聚合
应用层处理 灵活控制 增加应用复杂度

对于需要搜索和聚合 null 值的场景,null_value 是最直接的解决方案。

相关推荐
SelectDB1 天前
从 OpenSearch 到 Apache Doris:领创集团日志系统升级实践,降本 45%
大数据·apache
点云SLAM1 天前
方差的迭代计算公式
大数据·深度学习·数据分析·概率论·数学原理·概论率
LSL666_1 天前
1 elasticSearch 和 IK分词器的本地下载
大数据·elasticsearch·jenkins
lpfasd1231 天前
git-进阶技巧与最佳实践
大数据·git·elasticsearch
微盛AI企微管家1 天前
企业微信AI聊天agent:优化企业微信客户运营的推荐工具
大数据·人工智能·微信·企业微信
hmb↑1 天前
Apache Flink CDC——变更数据捕获
大数据·flink·apache
贝多财经1 天前
双11释放新增量,淘宝闪购激活近场潜力
大数据
KANGBboy1 天前
ES 总结
hive·elasticsearch
凌不了云1 天前
doris通过外部表同步数据
大数据
todoitbo1 天前
从大数据角度看时序数据库选型:Apache IoTDB的实战经验分享
大数据·apache·时序数据库·iotdb