【SQL|大数据|数据清洗|过滤】where条件中 “ != “ 和 “ NOT IN() ” 对NULL的处理

对数据进行清洗过滤的时候,NULL往往是一个很特殊的存在,对NULL值的存在通常有以下三种方式

1、保留NULL

2、过滤掉NULL

3、将NULL替换为其他符合业务需求的默认常量

下面是一些常用处理NULL的方式:

如下图所示数据源:

car_vin:汽车车架号,汽车的唯一标识

id:汽车检测里程的id,每次检测的唯一标识

mileage:汽车的行驶里程

sql 复制代码
SELECT * FROM tmp;

一、WHERE

这部分讲解在WHERE子句中如何对NULL值进行处理

1、IS NULL 、IS NOT NULL

sql 复制代码
SELECT  car_vin
        ,id
        ,mileage
FROM    tmp
WHERE   mileage IS NOT NULL
;
sql 复制代码
SELECT  car_vin
        ,id
        ,mileage
FROM    tmp
WHERE   mileage IS NULL
;

2、!=

在where子句中用到!=号,后面接过滤条件,此时NULL值也会被过滤

sql 复制代码
SELECT  car_vin
        ,id
        ,mileage
FROM    tmp
WHERE   mileage !=0
;

从下图的结果可以看出,除了0值,NULL同样被过滤掉了

由于 NULL 的特殊性质,在 SQL 中,任何与 NULL 进行比较的结果都是 NULL。这意味着在条件 mileage != 0 中,如果 mileage 是 NULL,这个表达式的结果不会返回 true,而是返回 NULL。where子句中只返回结果为true的行,因此,该行记录不会被选中,即NULL值会被过滤掉。

WHERE mileage !=0 只会返回 mileage 不为 0 的记录,但也会排除掉 mileage 为 NULL 的记录。因此,mileage 为 NULL 的行不会出现在查询结果中。

3、NOT IN

使用 NOT IN 同样会过滤掉NULL值

sql 复制代码
SELECT  car_vin
        ,id
        ,mileage
FROM    tmp
WHERE   mileage NOT IN (0)
;

在 SQL 中,任何与 NULL 进行比较的结果都是 NULL
SELECT NULL NOT IN (0); 返回的结果依旧为NULL

所以使用NOT IN ,NULL值所在的行不满足返回结果为TRUE的条件,会被过滤掉。

二、函数

1、NVL()

当您在查询中希望用一个具体的值来代替NULL值时,使用NVL函数可将NULL值替换为指定的值,确保在执行数据分析或生成报告时,结果中不会有意外的空值。

命令格式

sql 复制代码
nvl(T <value>, T <default_value>)

参数说明

value:必填。输入参数。T指代输入数据类型,可以是当前使用的数据库或计算引擎支持的所有数据类型。

default_value:必填。替换后的值。必须与value的数据类型保持一致。

返回值说明

如果value值为NULL,返回default_value,否则返回value,函数的两个参数的数据类型必须一致。

相关推荐
生命几十年3万天19 分钟前
redis时间优化
数据库·redis·缓存
Elastic 中国社区官方博客21 分钟前
释放专利力量:Patently 如何利用向量搜索和 NLP 简化协作
大数据·数据库·人工智能·elasticsearch·搜索引擎·自然语言处理
力姆泰克24 分钟前
看电动缸是如何提高农机的自动化水平
大数据·运维·服务器·数据库·人工智能·自动化·1024程序员节
力姆泰克24 分钟前
力姆泰克电动缸助力农业机械装备,提高农机的自动化水平
大数据·服务器·数据库·人工智能·1024程序员节
Lionhacker25 分钟前
网络工程师这个行业可以一直干到退休吗?
网络·数据库·网络安全·黑客·黑客技术
QYR市场调研29 分钟前
自动化研磨领域的革新者:半自动与自动自磨机的技术突破
大数据·人工智能
eternal__day38 分钟前
MySQL_聚合函数&分组查询
数据库·mysql
WZF-Sang2 小时前
Linux—进程学习-01
linux·服务器·数据库·学习·操作系统·vim·进程
半部论语2 小时前
第三章:TDengine 常用操作和高级功能
大数据·时序数据库·tdengine
菜鸡且互啄692 小时前
云岚到家购物车迁移思路
数据库