当前位置: 首页 > news >正文

Filter 实现过滤符合条件的请求并落库

其他系列文章导航

Java基础合集
数据结构与算法合集

设计模式合集

多线程合集

分布式合集

ES合集


文章目录

其他系列文章导航

文章目录

前言

一、配置过滤器类

二、定义数据表、实体类、Mapper

2.1 DDL

2.2 实体类

2.3 Mapper

三、创建一个过滤器

四、实现 Nacos 配置热更新

五、自定义 RequestWrapper 

六、容易踩的坑 

6.1 Java 工具类 Mapper 层报空指针

6.2 工具类中使用 @Value 给静态变量注入值失败

七、总结


前言

Java过滤器(Filter)在Java Servlet API中是一个非常有用的组件,它允许你在请求到达Servlet或JSP之前或之后执行某些操作。

 

需求:当请求进入系统时进行拦截,如果符合拦截规则就将请求详情落库。

背景:SpringCloud 项目,注册中心是 Nacos。


一、配置过滤器类

首先,你需要在你的Spring Boot应用中添加Nacos的依赖。

我们选择 OncePerRequestFilter。

OncePerRequestFilter定义:

OncePerRequestFilter 是 Spring Framework 中的一个过滤器接口,用于处理每个请求只执行一次的逻辑。这个过滤器类型是为了确保某个特定的逻辑只会在一个请求中被执行一次,无论该请求经过了多少个过滤器链。

使用 OncePerRequestFilter 的一个常见场景是,你可能希望在每个请求处理之前或之后执行某些操作,但又不希望这些操作在每个过滤器链中被重复执行。

 

然后,你可以创建一个过滤器类,如下所示:

@Configuration
public class FilterConfig {@Beanpublic FilterRegistrationBean<OncePerRequestFilter> logFilter() {FilterRegistrationBean<OncePerRequestFilter> registration = new FilterRegistrationBean<>();registration.setFilter(new RequestLogFilter());registration.setOrder(Ordered.HIGHEST_PRECEDENCE);return registration;}
}

这个配置类定义了一个过滤器,名为logFilter,它在每个请求上只执行一次(由其实现的OncePerRequestFilter接口保证)。

这个过滤器用于请求日志记录,其顺序被设置为最高优先级。 


二、定义数据表、实体类、Mapper

2.1 DDL

请求时间入库自动生成。

create table C##YYTXD.SHUXX_REQUEST_LOGS
(METHOD  VARCHAR2(10),URI     VARCHAR2(255),HEADERS VARCHAR2(4000),BODY    VARCHAR2(4000),IP      VARCHAR2(255),TIME    TIMESTAMP(6) default CURRENT_TIMESTAMP
)
/

2.2 实体类

定义一个Java实体类,用于映射数据库中的REQUEST_LOGS表。该类使用了Lombok库来简化代码的编写,同时使用了MyBatis Plus库的注解来方便地与数据库交互。

如下所示:

@TableName(value ="REQUEST_LOGS")
@Data
public class RequestLogs implements Serializable {private String method;private String uri;private String headers;private String body;private String ip;@TableField(exist = false)private Date time;@TableField(exist = false)private static final long serialVersionUID = 1L;
}

这个实体类主要用于封装HTTP请求的日志信息,方便存储到数据库中。

每个日志记录可以包含请求的方法、URI、头部信息、正文内容、发起请求的IP地址以及请求的时间等信息。 

2.3 Mapper

@Mapper
public interface RequestLogsMapper extends BaseMapper<RequestLogs> {}
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapperPUBLIC "-//mybatis.org//DTD Mapper 3.0//EN""http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.mapper.RequestLogsMapper"><resultMap id="BaseResultMap" type="com.domain.po.RequestLogs"><result property="method" column="METHOD" jdbcType="VARCHAR"/><result property="uri" column="URI" jdbcType="VARCHAR"/><result property="headers" column="HEADERS" jdbcType="VARCHAR"/><result property="body" column="BODY" jdbcType="VARCHAR"/><result property="ip" column="IP" jdbcType="VARCHAR"/><result property="time" column="TIME" jdbcType="TIMESTAMP"/></resultMap><sql id="Base_Column_List">METHOD,URL,HEADERS,BODY,IP,TIME</sql></mapper>

三、创建一个过滤器

该过滤器用于记录HTTP请求日志。这个类继承了OncePerRequestFilter,这意味着它会在每个请求上只执行一次。如下所示:

@Component
public class RequestLogFilter extends OncePerRequestFilter {@Resourceprivate RequestLogUriProperties requestLogUrlProperties;@Resourceprivate RequestLogsMapper requestLogsMapper;public RequestLogFilter() {}public static RequestLogFilter requestLogFilter;@PostConstructpublic void init() {requestLogFilter = this;}@Overrideprotected void doFilterInternal(HttpServletRequest request, HttpServletResponse response, FilterChain filterChain) throws ServletException, IOException {String uri = request.getRequestURI();AntPathMatcher matcher = new AntPathMatcher();HttpServletRequest requestWrapper = new RequestWrapper(request);for (String filterUri : requestLogFilter.requestLogUrlProperties.getUris()) {if (!matcher.match(filterUri, uri)) continue;String method = request.getMethod();String ip = request.getRemoteAddr();String body = RequestWrapper.getBodyString(requestWrapper);Enumeration<String> headerNames = request.getHeaderNames();Map<String, String> headers = new HashMap<>();// 遍历所有请求头,并存入Map中while (headerNames.hasMoreElements()) {String headerName = headerNames.nextElement();String headerValue = request.getHeader(headerName);headers.put(headerName, headerValue);}RequestLogs logsDto = new RequestLogs();logsDto.setMethod(method);logsDto.setUri(uri);logsDto.setHeaders(headers.toString());logsDto.setBody(body);logsDto.setIp(ip);requestLogFilter.shuxxRequestLogsMapper.insert(logsDto);}// 继续传递请求filterChain.doFilter(requestWrapper, response);}
}

这个过滤器的主要目的是捕获与特定URI模式匹配的所有HTTP请求,并将这些请求的相关信息记录到日志中。

特定URI模式匹配使用的是 ant url。匹配规则定义在配置文件中。


四、实现 Nacos 配置热更新

配置和初始化一个名为RequestLogUriProperties的bean。

这个bean主要用于存储和获取需要记录日志的URL列表。如下所示:

@Configuration
@ConfigurationProperties(prefix = "request-log")
@RefreshScope
//Nacos配置热更新
public class RequestLogUriProperties {public List<String> getUris() {return uris;}public void setUris(List<String> uris) {this.uris = uris;}private List<String> uris;}

通过与Spring的属性绑定机制结合,在 Nacos 配置文件中定义这些URL,并通过setter方法将其设置到bean中。同时,由于使用了@RefreshScope注解,当这些URL的配置发生变化时,bean会被重新初始化,从而实现配置的热更新。 

注解解释:

  • @Configuration: 这是Spring框架的注解,表示该类是一个配置类,用于定义和注册beans。
  • @ConfigurationProperties(prefix = "request-log"): 这个注解将RequestLogUriProperties类与Spring的属性绑定机制结合,使得你可以在外部配置文件中使用request-log前缀来定义属性,并这些属性会自动填充到RequestLogUriProperties类的字段中。
  • @RefreshScope: 这是Spring Cloud的注解,用于支持配置的热更新。当配置发生变化时,带有此注解的bean会被重新初始化。

Nacos 中配置:

request-log:uris:- /index/*- ......

这个配置会拦截所以 uri 是 /index/* 的请求。 


五、自定义 RequestWrapper 

spring boot项目,在过滤器、拦截器或自定义 aop 做统一处理时,获取了request中的inputstream来获取RequestBody里数据,获取之后在Controller里使用@RequestBody注解再获取的话。

就报错:Stream closed。

这是因为 HttpServletRequest 中的 inputstream 是不可重复读的。

所以我们要自定义 RequestWrapper ,对 HttpServletRequest 进行处理。

public class RequestWrapper extends HttpServletRequestWrapper {private final byte[] body;public RequestWrapper(HttpServletRequest request) {super(request);// 获取 requestBody 中的数据body = getBodyString(request).getBytes(StandardCharsets.UTF_8);}//通过覆盖getReader和getInputStream方法,将request中的body数据存储到内存中的输入流,使得body数据能够被多次读取。@Overridepublic BufferedReader getReader() {return new BufferedReader(new InputStreamReader(getInputStream()));}@Overridepublic ServletInputStream getInputStream() {// 定义内存中的输入流final ByteArrayInputStream stream = new ByteArrayInputStream(body);return new ServletInputStream() {@Overridepublic int read() {// 使用内存输入流读取数据return stream.read();}@Overridepublic boolean isFinished() {return false;}@Overridepublic boolean isReady() {return false;}@Overridepublic void setReadListener(ReadListener readListener) {}};}//getBodyString方法用于获取request的body数据并转换为字符串返回。public static String getBodyString(HttpServletRequest request) {StringBuilder sb = new StringBuilder();InputStream inputStream = null;BufferedReader reader = null;try {inputStream = request.getInputStream();reader = new BufferedReader(new InputStreamReader(inputStream, StandardCharsets.UTF_8));String line;while ((line = reader.readLine()) != null) {sb.append(line);}} catch (IOException e) {e.printStackTrace();} finally {if (inputStream != null) {try {inputStream.close();} catch (IOException e) {e.printStackTrace();}}if (reader != null) {try {reader.close();} catch (IOException e) {e.printStackTrace();}}}return sb.toString();}
}

这个类包装了一个HttpServletRequest对象。这个类的主要目的是重写HttpServletRequestgetReadergetInputStream方法,以便将请求体的数据存储在内存中的输入流,从而允许多次读取请求体的数据。


六、容易踩的坑 

6.1 Java 工具类 Mapper 层报空指针

问题:

在使用Spring框架时,尝试将Service注入到非Spring管理的静态方法或工具类中。在Spring中,依赖注入主要依赖于@Autowired@Resource注解,但是这些注解不适用于静态方法或非Spring管理的类。

原因:

当你在Controller层使用Service时,可以通过@Resource或@Autowired注解轻松注入Service。但在普通类或工具类中使用Service时,会遇到找不到注解的属性值的问题,导致Service为null并报空指针异常。

即使在调用Service的类中添加了@Component注解并加入了Spring容器管理,问题仍然存在。

另外,由于工具类或普通类是静态方法,而Service和Mapper是非静态的,因此无法直接注入到静态方法中。

即使将Service和Mapper注入为静态的,仍然会报空指针异常。

为了解决这个问题,你可以考虑使用单例模式、使用ApplicationContext、重构代码或避免在工具类或普通类中使用静态方法。

解决方法如下:

    public RequestLogFilter() {}public static RequestLogFilter requestLogFilter;@PostConstructpublic void init() {requestLogFilter = this;}

在类的实例化完成后,它的当前实例会被设置为静态字段requestLogFilter的引用。这种模式通常用于单例模式或确保只有一个实例存在的其他模式。

6.2 工具类中使用 @Value 给静态变量注入值失败

问题:

在SpringBoot中使用@value注解只能给普通变量注入值,不能直接给静态变量赋值,直接给静态变量赋值的话这些值会一直为null。

解决方案: 

若要给静态变量赋值,可以使用set()方法,首先在对应的类上加上@Component注解,在set方法上使用value注解(注意set方法不是静态的,否则无法赋值)。

    private static String uri;@Value("${uri}")public void seturi(String uri) {this.uri= uri;}

七、总结

实现一个高效的过滤器需要仔细考虑多个方面,包括规则定义、拦截机制、处理逻辑、性能优化、异常处理、配置管理和安全性。

通过合理地设计和实现过滤器,可以帮助提高系统的安全性、可维护性和可靠性。

此外,了解不同过滤器框架和技术的特点可以帮助你选择最适合你的特定需求的解决方案。


 

相关文章:

Filter 实现过滤符合条件的请求并落库

其他系列文章导航 Java基础合集数据结构与算法合集 设计模式合集 多线程合集 分布式合集 ES合集 文章目录 其他系列文章导航 文章目录 前言 一、配置过滤器类 二、定义数据表、实体类、Mapper 2.1 DDL 2.2 实体类 2.3 Mapper 三、创建一个过滤器 四、实现 Nacos 配置…...

使用ChatGpt和文心一言辅助文章创作

近期在写数字水浒系列文章&#xff0c;使用了ChatGpt和文心一言进行辅助创作&#xff0c;整体感受不错&#xff0c;提高了工作效率。 在使用过程中&#xff0c;感觉文心的中文能力更强一些&#xff0c;主要体现在&#xff1a; 1 语料库更大&#xff0c;比如对水浒传了解的更多…...

OpenCV识别视频中物体运动并截取保存

功能很简单&#xff1a;输入原始视频&#xff0c;输出视频中有画面变化的部分 适合理解基本框架&#xff0c;可以在这个基础上增加各种酷炫时髦的功能 [doge] ※注释非常保姆级※ import cv2 import numpy as np import os from datetime import datetime# 检测两帧之间变化…...

6.Swift字面量

Swift 字面量 在 Swift 中&#xff0c;字面量是指直接指定数值、字符串、布尔值等常量的值的表示方式。使用字面量可以直接在代码中指定常量的值&#xff0c;而不需要通过变量或常量来存储。Swift 支持多种类型的字面量&#xff0c;包括整数、浮点数、布尔值、字符串、数组、字…...

拿捏循环链表

目录&#xff1a; 一&#xff1a;单链表&#xff08;不带头单向不循环&#xff09;与循环链表&#xff08;带头双向循环&#xff09;区别 二&#xff1a;循环链表初始化 三&#xff1a;循环链表头插 四&#xff1a;循环链表尾插 五&#xff1a;循环链表头删 六&#xff1…...

UMLChina公众号精选(20240207更新)

UMLChina服务 如何选择UMLChina服务 《软件方法》分步改进指南 做对《软件方法》强化自测题获得“软件方法建模师”称号 建模示范视频 [EA-029/石油钻井管理平台]35套UML/SysMLEA/StarUML的建模示范视频-全程字幕 UMLChina连EA经销商都不是&#xff0c;EA水平靠谱嘛&#xff1f…...

东南亚手游市场攻略:出海前的关键准备与注意事项

随着全球游戏市场的日益繁荣&#xff0c;越来越多的手游企业开始将目光投向海外市场&#xff0c;其中东南亚地区因其庞大的用户基数和逐渐成熟的游戏市场环境&#xff0c;成为了不少企业的首选目标。然而&#xff0c;想要在东南亚市场取得成功&#xff0c;并非易事。本文Nox聚星…...

python二维数组初始化的一个极其隐蔽的bug(浅拷贝)

初始化一个三行三列的矩阵 m n 3初始化方式1 a [[0 for i in range(m)] for j in range(n)]初始化方式2 b [] row [0 for i in range(0,m)] for i in range(0,n):b.append(row)分别输出两个初始化的结果 for row in a:print(row) for row in b:print(row)当前的输出为…...

iOS 需求 多语言(国际化)App开发 源码

一直觉得自己写的不是技术&#xff0c;而是情怀&#xff0c;一个个的教程是自己这一路走来的痕迹。靠专业技能的成功是最具可复制性的&#xff0c;希望我的这条路能让你们少走弯路&#xff0c;希望我能帮你们抹去知识的蒙尘&#xff0c;希望我能帮你们理清知识的脉络&#xff0…...

YOLOv8改进 | 利用训练好权重文件计算YOLOv8的FPS、推理每张图片的平均时间(科研必备)

一、本文介绍 本文给大家带来的改进机制是利用我们训练好的权重文件计算FPS,同时打印每张图片所利用的平均时间,模型大小(以MB为单位),同时支持batch_size功能的选择,对于轻量化模型的读者来说,本文的内容对你一定有帮助,可以清晰帮你展示出模型速度性能的提升以及轻量…...

std::vector<cv::Mat>和unsigned char** in_pixels 互相转换

将std::vectorcv::Mat转换为unsigned char** in_pixels&#xff0c; std::vector<cv::Mat> matVector; // 假设已经有一个包含cv::Mat的vector// 创建一个二维数组&#xff0c;用于存储像素数据 unsigned char** in_pixels new unsigned char*[matVector.size()]; for …...

04-Java建造者模式 ( Builder Pattern )

建造者模式 摘要实现范例 建造者模式&#xff08;Builder Pattern&#xff09;使用多个简单的对象一步一步构建成一个复杂的对象 一个Builder 类会一步一步构造最终的对象&#xff0c;该 Builder 类是独立于其他对象的 建造者模式属于创建型模式&#xff0c;它提供了一种创建对…...

使用PHPStudy搭建Cloudreve网盘服务

文章目录 1、前言2、本地网站搭建2.1 环境使用2.2 支持组件选择2.3 网页安装2.4 测试和使用2.5 问题解决 3、本地网页发布3.1 cpolar云端设置3.2 cpolar本地设置 4、公网访问测试5、结语 1、前言 自云存储概念兴起已经有段时间了&#xff0c;各互联网大厂也纷纷加入战局&#…...

Lua协程-coroutine

lua也有协程这个机制&#xff0c;用以完成非抢占式的多任务处理。 协程与线程 协程和线程类似&#xff0c;有自己的堆栈、局部变量、指令指针等等。但同时也有不一致的地方&#xff0c;其中最重要的地方在于多线程程序可以同一时间运行多个线程&#xff0c;而协程同一时间只能…...

HTML5+CSS3+移动web——HTML 基础

目录 一、标签语法 HTML的基本框架 1. 标题标签 2. 段落标签 3. 换行和水平线 4. 文本格式化标签 5. 图像标签 6. 路径 相对路径 绝对路径 7. 超链接标签 8. 音频 9. 视频 10. 注释 二、标签结构 一、标签语法 HTML 超文本标记语言——HyperText Markup Langua…...

Java中List接口的常用方法

列举一些List接口的常用方法 List接口是Java集合框架中的一个核心接口&#xff0c;它定义了一个有序的集合&#xff08;也称为序列&#xff09;。List接口继承自Collection接口&#xff0c;因此它包含了Collection接口中定义的所有方法&#xff0c;同时还增加了一些特定的方法…...

mysql基础从头到尾快速梳理

MYSQL数据库学习 mysql的启动 net start mysql net stop mysql MYSQL客户端的连接 mysql -h 127.0.0.1 -p 3306 -u root -p SQL SQL通用语法 SQL语句可以单行或者多行书写&#xff0c;以分号结尾SQL语句可以使用空格/缩进来增强语句的可读性Mysql数据库的SQL语句不区分大…...

MySQL用心总结

大家好&#xff0c;好久不见&#xff0c;今天笔者用心一步步写一份mysql的基础操作指南&#xff0c;欢迎各位点赞收藏 -- 启动MySQL net start mysql-- 创建Windows服务 sc create mysql binPath mysqld_bin_path(注意&#xff1a;等号与值之间有空格) mysql -h 地址 -…...

电路设计(13)——生产线易拉罐自动计数装置的proteus仿真

1.设计要求 使用指定元件&#xff0c;用模电、数电等有关知识&#xff0c;设计并制作一个易拉罐饮料计数自动化的模拟装置。生产单位常采用红外自动计数装置&#xff0c;将装有饮料的易拉罐放在马达带动的传动带上&#xff0c;在传动带运动的过程中让每个易拉罐依次同一方向地穿…...

微服务-微服务Alibaba-Nacos 源码分析 (源码流程图)-2.0.1

客户端注册临时实例&#xff0c;GRPC处理 客户端服务发现 及订阅处理 客户端数据变换&#xff0c;数据推送&#xff0c;服务端集群服务数据同步...

设计模式和设计原则回顾

设计模式和设计原则回顾 23种设计模式是设计原则的完美体现,设计原则设计原则是设计模式的理论基石, 设计模式 在经典的设计模式分类中(如《设计模式:可复用面向对象软件的基础》一书中),总共有23种设计模式,分为三大类: 一、创建型模式(5种) 1. 单例模式(Sing…...

智能分布式爬虫的数据处理流水线优化:基于深度强化学习的数据质量控制

在数字化浪潮席卷全球的今天&#xff0c;数据已成为企业和研究机构的核心资产。智能分布式爬虫作为高效的数据采集工具&#xff0c;在大规模数据获取中发挥着关键作用。然而&#xff0c;传统的数据处理流水线在面对复杂多变的网络环境和海量异构数据时&#xff0c;常出现数据质…...

Linux --进程控制

本文从以下五个方面来初步认识进程控制&#xff1a; 目录 进程创建 进程终止 进程等待 进程替换 模拟实现一个微型shell 进程创建 在Linux系统中我们可以在一个进程使用系统调用fork()来创建子进程&#xff0c;创建出来的进程就是子进程&#xff0c;原来的进程为父进程。…...

重启Eureka集群中的节点,对已经注册的服务有什么影响

先看答案&#xff0c;如果正确地操作&#xff0c;重启Eureka集群中的节点&#xff0c;对已经注册的服务影响非常小&#xff0c;甚至可以做到无感知。 但如果操作不当&#xff0c;可能会引发短暂的服务发现问题。 下面我们从Eureka的核心工作原理来详细分析这个问题。 Eureka的…...

回溯算法学习

一、电话号码的字母组合 import java.util.ArrayList; import java.util.List;import javax.management.loading.PrivateClassLoader;public class letterCombinations {private static final String[] KEYPAD {"", //0"", //1"abc", //2"…...

JVM 内存结构 详解

内存结构 运行时数据区&#xff1a; Java虚拟机在运行Java程序过程中管理的内存区域。 程序计数器&#xff1a; ​ 线程私有&#xff0c;程序控制流的指示器&#xff0c;分支、循环、跳转、异常处理、线程恢复等基础功能都依赖这个计数器完成。 ​ 每个线程都有一个程序计数…...

接口自动化测试:HttpRunner基础

相关文档 HttpRunner V3.x中文文档 HttpRunner 用户指南 使用HttpRunner 3.x实现接口自动化测试 HttpRunner介绍 HttpRunner 是一个开源的 API 测试工具&#xff0c;支持 HTTP(S)/HTTP2/WebSocket/RPC 等网络协议&#xff0c;涵盖接口测试、性能测试、数字体验监测等测试类型…...

从物理机到云原生:全面解析计算虚拟化技术的演进与应用

前言&#xff1a;我的虚拟化技术探索之旅 我最早接触"虚拟机"的概念是从Java开始的——JVM&#xff08;Java Virtual Machine&#xff09;让"一次编写&#xff0c;到处运行"成为可能。这个软件层面的虚拟化让我着迷&#xff0c;但直到后来接触VMware和Doc…...

前端调试HTTP状态码

1xx&#xff08;信息类状态码&#xff09; 这类状态码表示临时响应&#xff0c;需要客户端继续处理请求。 100 Continue 服务器已收到请求的初始部分&#xff0c;客户端应继续发送剩余部分。 2xx&#xff08;成功类状态码&#xff09; 表示请求已成功被服务器接收、理解并处…...

渗透实战PortSwigger Labs指南:自定义标签XSS和SVG XSS利用

阻止除自定义标签之外的所有标签 先输入一些标签测试&#xff0c;说是全部标签都被禁了 除了自定义的 自定义<my-tag onmouseoveralert(xss)> <my-tag idx onfocusalert(document.cookie) tabindex1> onfocus 当元素获得焦点时&#xff08;如通过点击或键盘导航&…...