springboot 数据和日志脱敏应用实践

纵死侠骨香,不惭世上英。

1 前言

数据脱敏(Data Masking)是一种数据保护技术,在日常的开发过程中,经常会遇到敏感数据,如个人信息,姓名、手机号、身份证,银行卡,地址等信息。这些数据在返回页面或者日志打印时,为了保护数据的隐私和安全性,同时尽量保持数据的格式,就需要隐藏或者替换部分敏感数据。在本文中,将介绍日志信息脱敏和数据脱敏,前者是为了防止业务日志信息泄露敏感信息,后者是在前端页面避免暴露敏感信息。

2 数据脱敏

对于数据脱敏的实现方式,通常由以下三种:

  • 1 数据替换,将敏感数据替换为符合特定格式的伪造数据,比如姓名手机号替换,金额末几位替换等。
  • 2 数据屏蔽,对敏感数据进行屏蔽,只显示部分信息,比如只显示银行卡、身份证件的前后几位,这也是常用的方式。
  • 3 数据加密,对敏感数据进行加密处理,只有特定用户输入密码或者插入硬件ukey后才能查看真实数据。

数据脱敏的目的和益处:

  • 1 数据保护,通过脱敏技术,可以使得数据在传输、处理、展示过程减少数据泄露和滥用的风险。
  • 2 数据合规,许多行业和法规对敏感数据的保护都有着严格的要求,保护敏感数据不泄露是合规的必须要求。

3 返回值脱敏

在前文中已经介绍了 SpringBoot-开发技巧-加密返回字段, 其实这也是数据脱敏的一种方式,不过在本文中将介绍另外一种实现方式,使用 jackson 序列化的方式实现数据的脱敏。

首先,我们需要自定义一个脱敏的注解,并配置其脱敏的策略:

然后,需要配置序列化的处理器,主要是通过字段的注解匹配序列化的方式,实现如下的两个方法:

arduino 复制代码
# jackson 序列化字段以及匹配脱敏的方式
ContextualSerializer.createContextual
JsonSerializer.serialize

以下是数据脱敏的正则替换,最终通过正则表达式的方式实现数据的脱敏,通常使用 * 来掩盖部分敏感信息。 最终,我们需要通过对需要脱敏的字段加注脱敏的类型即可实现数据返回的脱敏,但是需要注意的是,只能在最终返回时进行数据的转换,否则在业务处理过程中导致业务数据的脱敏,会影响正常的业务流程。

如上图所示,通过注解的方式即可实现数据展示的脱敏。

4 hutool 脱敏工具

对于数据的脱敏手段,这里介绍的是 hutool 里面相应的脱敏工具类,通常包含用户名称、身份证号、手机号、地址、邮箱、密码以及银行卡等信息。对于数据的脱敏,通常是替换部分信息或者全部信息、替换中间的部分信息,对于车牌号以及地址等信息,可以替换其中的数字信息。

perl 复制代码
# hutool 数据脱敏
// 姓名脱敏
DesensitizedUtil.chineseName("李成梁");//  "李**"
// 身份证号脱敏,需要指定前后展示的位数
DesensitizedUtil.idCardNum("51343620000320711X", 1, 2);//"5***************1X"
// 手机号脱敏
DesensitizedUtil.fixedPhone("09157518479");// "0915*****79"
DesensitizedUtil.mobilePhone("18049531999");// "180****1999"
// 地址信息脱敏,指定脱敏的位数
DesensitizedUtil.address("北京市海淀区马连洼街道289号", 8);// "北京市海淀区马********"
// 邮箱脱敏
DesensitizedUtil.email("duandazhi-jack@gmail.com.cn");// "d*************@gmail.com.cn"
// 密码脱敏
DesensitizedUtil.password("1234567890");// "**********"
// 车牌号脱敏
DesensitizedUtil.carLicense("苏D40000");//"苏D4***0"
// 银行卡号脱敏
DesensitizedUtil.bankCard("11011111222233333256");// "1101 **** **** **** 3256"

5 日志脱敏

在开发实践中,会在项目代码中打印业务日志,业务日志中也会包含着敏感信息,也需要进行日志的脱敏。日志的脱敏,需要继承 MessageConverter,然后重新 convert 方法,通过重写日志的方式来实现信息的脱敏。这里采用了配置的方式,可以通过配置中心的设置,使得脱敏规则的即时生效。脱敏的方式可以使用关键字的方式以及正则匹配的方式。

下图是关键字表达式和正则表达式的方式来实现日志的脱敏。

在此处,需要按照特定的匹配方式寻找对应字段的处理器,这里使用了模板和策略模式,可以参照 springboot-策略和模板模式的思考与实践 进行处理。 最后需要在 resources 中配置相应的日志格式以及 springboot 的自动配置。

日志信息脱敏项目 sandbox-desen 可以打成 jar 包集成到其它项目中,加以简单的配置既可以实现日志信息的脱敏。首先需要添加脱敏组件的依赖,在项目中配置脱敏规则,脱敏规则已经有默认配置项,最后在 resources 中配置 logback-spring.xml 文件,加载配置文件即可实现日志中的敏感信息脱敏。

6 总结

在本文中介绍了数据脱敏的内容,主要介绍了数据返回值的脱敏和日志信息脱敏,两种脱敏方式都是保护数据的重要组成部分。本文中的数据脱敏实践仅仅是众多实现方式的一种,数据脱敏还可以有其它的方式,对于日志的脱敏还可以更精准的实现,而不需要使用字符串匹配的方式来实现。本文中所涉及的代码已经上传至 github, 欢迎交流学习。项目地址 springboot-auth

相关推荐
无风听海20 分钟前
ASP.NET Core .NET 10 错误响应体系全景:从 BadRequest 到编译器基础设施
后端·asp.net·.net
文心快码BaiduComate20 分钟前
从个人效能到组织资产:文心快码企业版Agent Hub上线,提升团队AI编程效能
前端·后端·程序员
雪隐1 小时前
个人电脑玩AI00-前言
人工智能·后端
我是一颗柠檬1 小时前
【Java后端技术亮点】动态路由权限(按钮级权限),细粒度控制到按钮级别
java·开发语言·后端·状态模式
前端Hardy1 小时前
CSS 动画真的比 JS 快?Josh Comeau 做了组实验,结果跟直觉不一样
前端·javascript·后端
Front思1 小时前
调取支付宝支付正式环境不可以唤起来,但是沙箱可以
后端
foggyprojects1 小时前
AI 生成 SQL 模板以后,为什么还需要固定 helper 规则
后端
明天一点2 小时前
Cloudflare 通知转发钉钉机器人
前端·后端
前端Hardy2 小时前
前端日历组件,要变天了?Schedule-X v4.6 彻底杀疯了
前端·javascript·后端
Oo_行者_oO2 小时前
微服务 Feign 从“万能公共服务”到“业务客户端”
后端·架构