基于springboot、logback的日志脱敏组件

Logback⽇志数据脱敏⼯具:隐私和安全的守护者

概述

在涉及敏感数据的⽇志记录环境中,数据保护和个⼈隐私⽆疑是⾄关重要的领域。确保敏感数据不被泄露,脱敏处理成为必不可少的⼀步。数据脱敏是⼀种技术⼿段,其将敏感信息转换为不可识别或不可逆转的形式,以便在保护⽤户隐私和数据安全的同时,不影响其原有的⽤途。

Logback是⼀个深受欢迎的Java⽇志框架,⼴泛应⽤于各类应⽤程序的⽇志记录中。它的强⼤之处在于提供了丰富的配置选项和灵活性,让开发⼈员能够完全掌控⽇志的输出格式和输出⽬标。

总结来说,这⼀切旨在提升数据隐私和安全性的标准,这不仅能够满⾜数据保护法规和隐私标准的要求,更能赢得⽤户对你的应⽤程序的信任。

关于Logback的基础知识,你可以参考深入探索 SLF4J、Log4J 和 Logback

参考demo

GitHub

快速⼊⻔

1. 引⼊依赖

|-------------------|-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
| 1 2 3 4 5 | <dependency> <groupId>com.xieahui.springboot</groupId> <artifactId>spring-boot-desensitization-starter</artifactId> <version>0.0.1-SNAPSHOT</version> </dependency> |

2. Logback配置⽂件

|-----------|--------------------------------------------------------------------|
| 1 | <include resource="logback-desensitization-included.xml"/> |

3. 说明
  • 配置中⼼配置过滤关键字
  • 过滤相关⽇志的关键字,使⽤英⽂逗号进⾏分隔。在设定后,过滤器仅对含有指定关键字的⽇志进⾏过滤。如果未设定,将不执⾏相关⽇志过滤。为了提⾼效率,建议设定指定关键字(⼤⼩写不敏感)。

详细介绍

1. 默认过滤模型
  • 银⾏卡模型 BankCardStarDesensitizationModel.java

    |---------------------|--------------------------------------------------------------------------------------------------------------------------------------------------------------|
    | 1 2 3 4 5 6 | /** * 银⾏卡脱敏 * 16-19位数字 * 保留:前三后四 */ private static final Pattern BANK_CARD_PATTERN=Pattern.compile("\\b([1,4,5,6,9]{1}\\d{2})\\d{9,14}(\\d{4})\\b"); |

  • 身份证号模型 IdNumberStarDesensitizationModel.java

    |---------------------|-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
    | 1 2 3 4 5 6 | /** * 身份证号脱敏 * 身份证号码为18位,前17位为数字,最后⼀位可能是数字或'X' * 保留:前三后四 */ private static final Pattern ID_NUMBER_PATTERN=Pattern.compile("\\b([1-9]{1}[0-9]{2})[0-9]{3}(?:19|20){1}[0-9]{2}(?:(?:0[1-9])|(?:1[1-2])){1}(?:(?:[0-2][1-9])|10|20|30|31){1}([0-9,xX]{4})\\b"); |

  • 护照模型 PassportStarDesensitizationModel.java

    |-------------------|-----------------------------------------------------------------------------------------------------------------------------------------------------|
    | 1 2 3 4 5 | /** * 护照脱敏 * 保留:前⼆后三 */ private static final Pattern PASSPORT_PATTERN=Pattern.compile("(E[ABCDEFGHJKLMNPQRSTUVWXYZ]\\d{1})\\d{2}(\\d{4})"); |

  • ⼿机号模型 PhoneNumberStarDesensitizationModel.java

    |---------------------|---------------------------------------------------------------------------------------------------------------------------------------------------------|
    | 1 2 3 4 5 6 | /** * ⼿机号脱敏 * ⼿机号通常为11位数字,以1开头 * 保留:前三后四 */ private static final Pattern PHONE_NUMBER_PATTERN=Pattern.compile("\\b(1\\d{2})\\d{4}(\\d{4})\\b"); |

2. ⽀持配置中⼼⾃定义模型
参数名称 数据类型 默认设置 功能描述
desensitization.open Boolean true 控制日志过滤器的开关。默认状态为开启。如需关闭,需将此设置为否(false)
desensitization.logSize Integer 1024 定义过滤日志的最大长度。超过此阈值的日志不会被过滤。请注意,如果此值设置过大,可能会影响系统性能。默认值为1024。
desensitization.bank.keys String 定义-银行卡号-过滤相关日志的关键字。
desensitization.idNumber.keys String 定义-身份证号-过滤相关日志的关键字。
desensitization.passport.keys String 定义-护照号-过滤相关日志的关键字。
desensitization.phoneNumber.keys String 定义-手机号-过滤相关日志的关键字。
  • 配置中⼼ - ⾃定义过滤⻓度 此设置允许您设定⽇志内容的⻓度限制。只有在⽇志内容⻓度⼩于或等于此限制的⽇志才会被过滤。这个功能可以提升系统的过滤性能,因此强烈建议进⾏设置。

    |-----------|----------------------|
    | 1 | logSize=1024 |

  • 配置中⼼ - ⾃定义过滤关键字 ⼀旦设定关键字,只有那些包含指定关键字的⽇志才会被过滤。如果未设置关键字,系统将默认不执⾏⽇志过滤。为了提⾼系统的运⾏效率,我们建议设置相关的关键字。

    附注:在配置关键字时,⽆需使⽤正则表达式,因为系统使⽤的是containsIgnoreCase⽅法来判断⽇志内容中是否存在关键字。

    |-------------------|--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
    | 1 2 3 4 5 | desensitization.bank.keys=你的关键字 desensitization.idNumber.keys=你的关键字 desensitization.passport.keys=你的关键字 desensitization.phoneNumber.keys=你的关键字 desensitization.keysModelsMappings=你的关键字和模型对应关系 |

3. ⽀持业务代码⾃定义模型
  • 业务编码⾃定义模型 在业务编码中,只需实现以下所示的接⼝,并使⽤相应的注解(例如@Service)将实现类注⼊到Spring容器中即可。

    |-----------|---------------------------------------------------------------------------|
    | 1 | com.xieahui.springboot.desensitization.model.DesensitizationModel |

  • 实现实例,可参考银⾏卡号过滤代码 BankCardStarDesensitizationModel.java

    |---------------------------------------------------------------------------------------------------------------------------------------------|----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
    | 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 | package com.xieahui.springboot.desensitization.model.star; import com.xieahui.springboot.desensitization.model.DesensitizationModel; import lombok.extern.slf4j.Slf4j; import org.springframework.core.annotation.Order; import org.springframework.stereotype.Component; import java.util.regex.Pattern; /** * @description: 银行卡脱敏模型 * @author: hui.xie * @email: xiehui1956@gmail.com * @date: 2024/5/11 13:35 */ @Slf4j @Order(10) @Component public class BankCardStarDesensitizationModel implements DesensitizationModel { public BankCardStarDesensitizationModel(){ log.info("BankCardStarDesensitizationModel init"); } /** * 银行卡脱敏 * 16-19位数字 * 保留:前三后四 */ private static final Pattern BANK_CARD_PATTERN = Pattern.compile("\\b([1,4,5,6,9]{1}\\d{2})\\d{9,14}(\\d{4})\\b"); @Override public String desensitize(String input) { return desensitize(input, BANK_CARD_PATTERN); } /** * 银行卡脱敏 * 16-19位数字 * 保留:前三后四 */ @Override public String getReplacement() { return "$1*********$2"; } } |

  • 说明:为什么我们建议通过编码⽅式添加匹配和替换模型呢?这是因为正则表达式匹配通常耗时较⻓。预设匹配模型的主要⽬的是优化程序性能,同时为业务⾃定义扩展逻辑提供⼀个⼊⼝点。

性能损耗测试

  • 总结:性能损耗非常小

  • 未使用脱敏组件

  • 使用脱敏组件全匹配

功能测试报告

友情提示

请注意,我们的测试场景仅覆盖了⼀些常⻅的简单情况。在使⽤该组件时,你需要根据⾃⼰的具体业务场景进⾏效果测试。如果在使⽤过程中遇到任何问题,请及时联系。谢谢。

相关推荐
LightOfNight10 分钟前
【后端面试题】【中间件】【NoSQL】ElasticSearch的优化方案1(分页查询、刷新间隔、批量提交)
数据库·redis·后端·elasticsearch·缓存·中间件·nosql
eclipsercp15 分钟前
《每天5分钟用Flask搭建一个管理系统》 第7章:用户认证
后端·python·flask
Karen19835 分钟前
基于weixin小程序农场驿站系统的设计
java·spring boot·mysql·毕业设计·课程设计
经海路大白狗37 分钟前
开启IT世界的第一步:高考新生的暑期学习指南
前端·后端·python·学习·高考
concisedistinct1 小时前
Perl 语言开发(三):运算符和表达式
开发语言·后端·perl
华为云开发者联盟1 小时前
一文了解Spring Boot启动类SpringApplication
java·spring boot·华为云开发者联盟·springapplication
云艺卿尘2 小时前
Vue初体验——了解属性和指令
前端·vue.js·后端
北野桜桃2 小时前
使用 infisical 管理和同步环境变量
前端·后端
柚几哥哥2 小时前
JFreeChart 生成Word图表
java·spring boot·word
写bug写bug4 小时前
11个提高生产力的Go小技巧
后端·go