当前位置：首页 > news >正文

目标检测之遮挡物体检测

news 2025/7/22 7:56:13

一、遮挡的类别

类内遮挡，目标被同一类别的目标遮挡
类间遮挡，目标被其它类别的目标遮挡

二、解决方法

数据标注

精调遮挡目标的GT边界框

数据增强

cutout：在训练时，随机mask目标，提升模型对遮挡的应对能力
mosaic：按一定比例融合多张图片，相当于模拟了一些遮挡的场景

网络结构

加注意力机制等，使模型提取判别力更强的特征
行人检测：将行人分为5个独立的区域，对这5个局部区域分别预测了一个0到1之间的遮挡分数，代表这5个局部区域的可见或者遮挡程度。使用这5个visibility score分别和对应区域的feature相乘后相加，得到最终的特征（Zhang, S., Wen, L., Bian, X., Lei, Z., & Li, S. Z. (2018). Occlusion-aware R-CNN: Detecting Pedestrians in a Crowd）

正负样本匹配机制

将匹配依据由IOU改成GIOU、DIOU、CIOU等

损失函数

RepLoss（Wang, X., Xiao, T., Jiang, Y., Shao, S., Sun, J., & Shen, C. (2017). Repulsion Loss: Detecting Pedestrians in a Crowd）

该损失函数由2部分组成，在要求预测框靠近匹配的GT框（T）的同时，也要求预测框远离其它GT框（B），在提升遮挡检测性能的同时降低检测器对NMS的敏感性

整体公式如下，第一部分为吸引损失，第二部分为排斥损失（又可以分为预测框与其它GT框的损失，以及预测框与其它预测框的损失）

第一部分损失的公式如下，

作用：使P与匹配的GT框互相靠近

其中，

$P_{+}$ ：与至少一个GT之间的IOU大于等于0.5，

$G_{Attr}^{P}$ ：与P有最大IOU值的GT框

第二部分损失的公式如下，

RepGT

作用：使P远离与P之间的IOU值是次大的GT框

其中，

$G_{Rep}^{P}$ ：除了与P匹配的GT外，与P之间有最大IOU的GT框（即与P之间的IOU值是次大的）

RepBox

作用：使匹配了不同GT的预测框之间互相远离（排斥），降低了检测器对NMS的敏感性

根据匹配的GT框序号，将 $P_{+}$ 分为不同的子集，如， $P_{+}=P_{1}\cap P_{2}\cap ... \cap P_{\varrho }$ ， $\varrho$ 表示GT框的数量

【参考文章】

“别挡我，我要C位出道！”谈谈深度学习目标检测中的遮挡问题 - 知乎

Repulsion Loss 遮挡场景下的目标检测 - 知乎

目标检测之遮挡物体检测

一、遮挡的类别类内遮挡，目标被同一类别的目标遮挡类间遮挡，目标被其它类别的目标遮挡二、解决方法数据标注精调遮挡目标的GT边界框数据增强 cutout：在训练时，随机mask目标，提升模型对遮挡的应对能力mosaic…...

编程日记 2023/7/10 1:21:42

Vim 命令大全

文章目录 Vim 命令大全移动光标编辑文本查找和替换保存和退出打开多个文件：在文件之间切换：打开新窗口切换窗口其他常用命令 Vim 命令大全移动光标 h: 左移光标j: 下移光标k: 上移光标l: 右移光标0: 移动光标到行首$: 移动光标到行末G: 移动光标到文件…...

编程日记 2023/7/10 0:48:21

【Visual Studio】printf() 函数无输出显示问题。使用 C++ 语言，配合 Qt 开发串口通信界面

使用 C 语言，配合 Qt 开发串口通信界面时，遇到 printf() 函数无输出显示。在工程属性的对应位置添加 editbin /SUBSYSTEM:CONSOLE $(OUTDIR)\$(ProjectName).exe 即可，如下图所示。成功运行的截图如下： Ref. Visual Studio 20…...

编程日记 2023/7/10 0:15:00

Linux安装配置Oracle+plsql安装配置（详细）

如果觉得本文不够详细，没有效果图，可移步详细版： Linux安装配置Oracleplsql安装配置（超详细）_超爱慢的博客-CSDN博客目录 1.安装虚拟机系统 1.安装虚拟机 2.配置虚拟机 1.设置机器名 2.修改域名映射 3.固定IP…...

编程日记 2023/7/9 23:41:39

软件UI工程师的职责模板

软件UI工程师的职责模板1 职责： 1.负责产品的UI视觉设计(手机软件界面网站界面图标设计产品广告及企业文化的创意设计等); 2.负责公司各种客户端软件客户端的UI界面及相关图标制作; 3.设定产品界面的整体视觉风格; 4.为开发工程师创建详细的界面说明文档&…...

编程日记 2023/7/9 23:08:18

【Python】Selenium操作cookie实现免登录

文章目录一、查看浏览器cookie二、获取cookie基本操作三、获取cookie并实现免登录四、封装成函数一、查看浏览器cookie cookie、session、token的区别： cookie存储在浏览器本地客户端，发送的请求携带cookie时可以实现登录操作。session存放在服务器。…...

编程日记 2023/7/9 22:34:57

【数据结构与算法篇】之时间复杂度与空间复杂度

【数据结构与算法篇】之时间复杂度与空间复杂度一、时间复杂度1.1时间复杂度的定义1.2 常见的时间复杂度的计算1.2.1 常数时间复杂度（ O ( 1 ) ) O(1)) O(1))1.2.2 线性时间复杂度（ O ( N ) O(N) O(N)）1.2.3 对数时间复杂度（ O (…...

编程日记 2023/7/9 22:01:36

硬件性能 - 网络瓶颈分析

简介本文章主要通过Linux命令查看网络信息、判断是否出现网络瓶颈等简单分析方法。其他硬件性能分析如下： 1. 硬件性能 - CPU瓶颈分析 2. 硬件性能 - 掌握内存知识 3. 硬件性能 - 磁盘瓶颈分析目录 1. 监控命令 sar 2. 带宽利用率 3. 网络延迟 4. 网络连接数 …...

编程日记 2023/7/9 21:28:15

stm32驱动MCP2515芯片，项目已通过测试

最近公司做一个项目，需要3路can通道，但是stm32看了很久，最多也就只有2个can，所以找到了一款MCP2515芯片，可以用spi驱动can。已经实现了can的发送和接收，接收采用的是外部中断接收的方式。和单片机本身带的…...

编程日记 2023/7/9 20:54:48

Nginx部署前后端分离项目

dev.env.js解释 //此文件时开发环境配置文件 use strice//使用严格模式 const merge require(webpacl-merge)//合并对象 const prodEnv require(./prod.env)//导出 module.exports merge(prodEnv,{//合并两个配置文件对象并生成一个新的配置文件，如果合并的过程…...

编程日记 2023/7/9 20:21:27

pytorch多分类问题 CrossEntropyLoss()函数的输入size/shape不一致问题

在使用pytorch实现一个多分类任务的时候，许多多分类任务在训练过程中都会有如下的代码： criterion nn.CrossEntropyLoss() loss criterion(output, target) # output.size : [batch_size, class_num] # target.size : [batch_size]许多的初学者会卡在…...

编程日记 2023/7/9 19:48:06

硬盘或者U盘提示需要格式化的解决办法

插入硬盘之后提示： 使用驱动器 G:中的光盘之前需要将其格式化是否要将其格式化? 如下图所示顿时慌了啊，里面还有比较重要的东西呢，这一下子完蛋？ 遇事找某宝，上面估计有这种技术服务。果然有这一类的技术服务&…...

编程日记 2023/7/9 19:14:44

前言借助clip-path,我们可以实现一些复杂的animation动画效果,我们先来简单概述一下它的特性,如MDN所描述的。 The clip-path CSS property creates a clipping region that sets what part of an element should be shown. Parts that are inside the region are shown, whi…...

编程日记 2023/7/9 18:41:23

Matlab绘图系列教程-Matlab 34 种绘图函数示例（下）

Matlab绘图系列教程：揭秘高质量科学图表的绘制与优化文章目录 Matlab绘图系列教程：揭秘高质量科学图表的绘制与优化第一部分：入门指南1.1 简介关于本教程的目的与范围Matlab绘图在科学研究中的重要性 1.2 准备工作安装Matlab及其工具箱 1.3 …...

编程日记 2023/7/9 18:08:02

【Vue+Django】Training Management Platform Axios并发请求 - 20230703

需求陈述由于API是特定单位/特定类别/特定教学方式的数据，故汇总数据需要循环请求不同单位/不同类别/不同教学方式。技术要点 1.axios并发请求 2.JS for循环 3.Vue数组中出现 ob :Observer无法取值问题的解决方法 4.将数据转化为数组 5.一次请求所有数据后&…...

编程日记 2023/7/9 17:34:41

smart Spring：自定义注解、拦截器的使用（更新中...）

文章目录〇、使用自定义注解的好处和工作原理一、如何使用自定义注解1.自定义一个注解2.在类、属性、方法上进行使用3.元注解二、使用拦截器的好处和工作原理三、如何使用拦截器参考本博客源码： 〇、使用自定义注解的好处和工作原理自定义注解是Java语言提供的…...

编程日记 2023/7/9 17:01:20

php导出pdf

插件官网：TCPDF 博主用的是tp6框架、tcpdf插件 composer require tecnickcom/tcpdf --ignore-platform-reqs 后面是忽略平台要求的参数 ---------------中文乱码start------------------ 关于中文乱码问题： 网上说的下载字体放入fonts 利用tools…...

编程日记 2023/7/9 16:27:59

【ECMAScript6_2】字符串

1、字符的Unicode表示法 ES6 加强了对 Unicode 的支持，允许采用\uxxxx形式表示一个字符，其中xxxx表示字符的 Unicode 码点。（\u0000-\uFFFF） 码点超过取值范围之后不能正确解读，但是只要给码点加上{}就可以正确解读。 …...

编程日记 2023/7/9 15:54:38

37.RocketMQ之Broker消息存储源码分析

highlight: arduino-light 消息存储文件 rocketMQ的消息持久化在我们在搭建集群时都特意指定的文件存储路径,进入指定的store目录下就可以看到。下面介绍各文件含义 CommitLog 存储消息的元数据。produce发出的所有消息都会顺序存入到CommitLog文件当中。 CommitLog由多个文件…...

编程日记 2023/7/9 15:21:16

RabbitMq应用延时消息

一.建立绑定关系 package com.lx.mq.bind;import com.lx.constant.MonitorEventConst; import lombok.extern.slf4j.Slf4j; import org.springframework.amqp.core.*; import org.springframework.beans.factory.annotation.Value; import org.springframework.context.annota…...

编程日记 2023/7/9 14:47:55