基于springboot、logback的日志脱敏组件

devtools/2024/10/18 2:31:10/

Logback⽇志数据脱敏⼯具:隐私和安全的守护者

概述

在涉及敏感数据的⽇志记录环境中,数据保护和个⼈隐私⽆疑是⾄关重要的领域。确保敏感数据不被泄露,脱敏处理成为必不可少的⼀步。数据脱敏是⼀种技术⼿段,其将敏感信息转换为不可识别或不可逆转的形式,以便在保护⽤户隐私和数据安全的同时,不影响其原有的⽤途。
Logback是⼀个深受欢迎的Java⽇志框架,⼴泛应⽤于各类应⽤程序的⽇志记录中。它的强⼤之处在于提供了丰富的配置选项和灵活性,让开发⼈员能够完全掌控⽇志的输出格式和输出⽬标。
总结来说,这⼀切旨在提升数据隐私和安全性的标准,这不仅能够满⾜数据保护法规和隐私标准的要求,更能赢得⽤户对你的应⽤程序的信任。
关于Logback的基础知识,你可以参考深入探索 SLF4J、Log4J 和 Logback。

参考demo

GitHub

快速⼊⻔

1. 引⼊依赖
1
2
3
4
5
<dependency><groupId>com.xieahui.springboot</groupId><artifactId>spring-boot-desensitization-starter</artifactId><version>0.0.1-SNAPSHOT</version>
</dependency>

2. Logback配置⽂件
1
<include resource="logback-desensitization-included.xml"/>
3. 说明
  • 配置中⼼配置过滤关键字
  • 过滤相关⽇志的关键字,使⽤英⽂逗号进⾏分隔。在设定后,过滤器仅对含有指定关键字的⽇志进⾏过滤。如果未设定,将不执⾏相关⽇志过滤。为了提⾼效率,建议设定指定关键字(⼤⼩写不敏感)。

详细介绍

1. 默认过滤模型
  • 银⾏卡模型 BankCardStarDesensitizationModel.java

    1
    2
    3
    4
    5
    6
    
    /**
    * 银⾏卡脱敏
    * 16-19位数字
    * 保留:前三后四
    */
    private static final Pattern BANK_CARD_PATTERN=Pattern.compile("\\b([1,4,5,6,9]{1}\\d{2})\\d{9,14}(\\d{4})\\b");
    
  • 身份证号模型 IdNumberStarDesensitizationModel.java

    1
    2
    3
    4
    5
    6
    
    /**
    * 身份证号脱敏
    * 身份证号码为18位,前17位为数字,最后⼀位可能是数字或'X'
    * 保留:前三后四
    */
    private static final Pattern ID_NUMBER_PATTERN=Pattern.compile("\\b([1-9]{1}[0-9]{2})[0-9]{3}(?:19|20){1}[0-9]{2}(?:(?:0[1-9])|(?:1[1-2])){1}(?:(?:[0-2][1-9])|10|20|30|31){1}([0-9,xX]{4})\\b");
    
  • 护照模型 PassportStarDesensitizationModel.java

    1
    2
    3
    4
    5
    
    /**
    * 护照脱敏
    * 保留:前⼆后三
    */
    private static final Pattern PASSPORT_PATTERN=Pattern.compile("(E[ABCDEFGHJKLMNPQRSTUVWXYZ]\\d{1})\\d{2}(\\d{4})");
    
  • ⼿机号模型 PhoneNumberStarDesensitizationModel.java

    1
    2
    3
    4
    5
    6
    
    /**
    * ⼿机号脱敏
    * ⼿机号通常为11位数字,以1开头
    * 保留:前三后四
    */
    private static final Pattern PHONE_NUMBER_PATTERN=Pattern.compile("\\b(1\\d{2})\\d{4}(\\d{4})\\b");
    
2. ⽀持配置中⼼⾃定义模型
参数名称数据类型默认设置功能描述
desensitization.openBooleantrue控制日志过滤器的开关。默认状态为开启。如需关闭,需将此设置为否(false)
desensitization.logSizeInteger1024定义过滤日志的最大长度。超过此阈值的日志不会被过滤。请注意,如果此值设置过大,可能会影响系统性能。默认值为1024。
desensitization.bank.keysString定义-银行卡号-过滤相关日志的关键字。
desensitization.idNumber.keysString定义-身份证号-过滤相关日志的关键字。
desensitization.passport.keysString定义-护照号-过滤相关日志的关键字。
desensitization.phoneNumber.keysString定义-手机号-过滤相关日志的关键字。
  • 配置中⼼ - ⾃定义过滤⻓度 此设置允许您设定⽇志内容的⻓度限制。只有在⽇志内容⻓度⼩于或等于此限制的⽇志才会被过滤。这个功能可以提升系统的过滤性能,因此强烈建议进⾏设置。

    1
    
    logSize=1024
    
  • 配置中⼼ - ⾃定义过滤关键字 ⼀旦设定关键字,只有那些包含指定关键字的⽇志才会被过滤。如果未设置关键字,系统将默认不执⾏⽇志过滤。为了提⾼系统的运⾏效率,我们建议设置相关的关键字。
    附注:在配置关键字时,⽆需使⽤正则表达式,因为系统使⽤的是containsIgnoreCase⽅法来判断⽇志内容中是否存在关键字。

    1
    2
    3
    4
    5
    
    desensitization.bank.keys=你的关键字
    desensitization.idNumber.keys=你的关键字
    desensitization.passport.keys=你的关键字
    desensitization.phoneNumber.keys=你的关键字
    desensitization.keysModelsMappings=你的关键字和模型对应关系
    
3. ⽀持业务代码⾃定义模型
  • 业务编码⾃定义模型 在业务编码中,只需实现以下所示的接⼝,并使⽤相应的注解(例如@Service)将实现类注⼊到Spring容器中即可。

    1
    
    com.xieahui.springboot.desensitization.model.DesensitizationModel
    
  • 实现实例,可参考银⾏卡号过滤代码 BankCardStarDesensitizationModel.java

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    
    package com.xieahui.springboot.desensitization.model.star;import com.xieahui.springboot.desensitization.model.DesensitizationModel;
    import lombok.extern.slf4j.Slf4j;
    import org.springframework.core.annotation.Order;
    import org.springframework.stereotype.Component;import java.util.regex.Pattern;/*** @description: 银行卡脱敏模型* @author: hui.xie* @email: xiehui1956@gmail.com* @date: 2024/5/11 13:35*/
    @Slf4j
    @Order(10)
    @Component
    public class BankCardStarDesensitizationModel implements DesensitizationModel {public BankCardStarDesensitizationModel(){log.info("BankCardStarDesensitizationModel init");}/*** 银行卡脱敏* 16-19位数字* 保留:前三后四*/private static final Pattern BANK_CARD_PATTERN = Pattern.compile("\\b([1,4,5,6,9]{1}\\d{2})\\d{9,14}(\\d{4})\\b");@Overridepublic String desensitize(String input) {return desensitize(input, BANK_CARD_PATTERN);}/*** 银行卡脱敏* 16-19位数字* 保留:前三后四*/@Overridepublic String getReplacement() {return "$1*********$2";}}
    
  • 说明:为什么我们建议通过编码⽅式添加匹配和替换模型呢?这是因为正则表达式匹配通常耗时较⻓。预设匹配模型的主要⽬的是优化程序性能,同时为业务⾃定义扩展逻辑提供⼀个⼊⼝点。

性能损耗测试

  • 总结:性能损耗非常小
  • 未使用脱敏组件
  • 使用脱敏组件全匹配

功能测试报告

友情提示

请注意,我们的测试场景仅覆盖了⼀些常⻅的简单情况。在使⽤该组件时,你需要根据⾃⼰的具体业务场景进⾏效果测试。如果在使⽤过程中遇到任何问题,请及时联系。谢谢。


http://www.ppmy.cn/devtools/56466.html

相关文章

ARM 240625

练习&#xff1a; 汇编实现1-100累加&#xff0c;结果保存在r0 .text 声明下面内容都属于文本段内容 .globl _start 声明 _start 是一个全局启用的标签_start: 封装 _start 标签&#xff0c;汇编的标签和C中函数类似mov r0,#0 mov 把0 搬运到 r0 寄存器mov r1,#1 mov 把1 …

【使用webrtc-streamer解析rtsp视频流】

webrtc-streamer WebRTC (Web Real-Time Communications) 是一项实时通讯技术&#xff0c;它允许网络应用或者站点&#xff0c;在不借助中间媒介的情况下&#xff0c;建立浏览器之间点对点&#xff08;Peer-to-Peer&#xff09;的连接&#xff0c;实现视频流和&#xff08;或&a…

Android中ViewModel+LiveData+DataBinding的配合使用(kotlin)

Android 中 ViewModel、LiveData 和 Data Binding 的配合使用&#xff08;Kotlin&#xff09; 摘要 本文将介绍如何在 Android 开发中结合使用 ViewModel、LiveData 和 Data Binding 进行数据绑定和状态更新。我们将详细探讨这三者之间的关系&#xff0c;并展示如何在 Kotlin…

uni-app的showModal提示框,进行删除的二次确认,可自定义确定或取消操作

实现效果&#xff1a; 此处为删除的二次确认示例&#xff0c;点击删除按钮时出现该提示&#xff0c;该提示写在js script中。 实现方式&#xff1a; 通过uni.showModal进行提示&#xff0c;success为确认状态下的操作自定义&#xff0c;此处调用后端接口进行了删除操作&#…

计算机网络知识整理笔记

目录 1.对网络协议的分层&#xff1f; 2.TCP/IP和UDP之间的区别&#xff1f; 3.建立TCP连接的三次握手&#xff1f; 4.断开TCP连接的四次挥手&#xff1f; 5.TCP协议如何保证可靠性传输&#xff1f; 6.什么是TCP的拥塞控制&#xff1f; 7.什么是HTTP协议&#xff1f; 8…

昇思25天学习打卡营第4天|linchenfengxue

需求&#xff1a;建立一个图像分类模型&#xff0c;提供自动识别有(猫、狗、飞机、汽车等等) 图片的功能 ResNet50图像分类 图像分类是最基础的计算机视觉应用&#xff0c;属于有监督学习类别&#xff0c;如给定一张图像(猫、狗、飞机、汽车等等)&#xff0c;判断图像所属的类…

Windows系统下文件夹权限详解

文章目录 问题描述文件夹属性 问题描述 今天在Win10系统下&#xff0c;实现文件夹设置权限&#xff0c;具体的方案的涉及到我们公司内部的一款加密软件&#xff0c;不太方便透漏&#xff0c;借此机会&#xff0c;我也重新的回顾下windows系统下的文件夹权限 文件夹属性 打开…

Linux自动化交互脚本expect开发

在日常开发任务中&#xff0c;运行shell脚本有时候会提示输入密码的操作&#xff0c;如何让脚本自动输入密码呢&#xff1f;这时使用expect帮我们输入&#xff0c;Expect是基于Tcl发展而来的&#xff0c;它不仅可以进行交互&#xff0c;还可以根据程序的提示模拟标准输入&#…