当前位置： 首页 > news >正文

IMU预积分的过程详解

news 文章来源：https://blog.csdn.net/Prototype___/article/details/134009161 2025/5/15 22:44:39

一、IMU和相机数据融合保证位姿的有效性：

  • 当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内，也能保持一个较好的位姿估计，这是纯视觉
    SLAM 无法做到的。

  • 当图像发生变化时，本质上我们没法知道是相机自身发生了运动，还是外界条件发生了变化，所以纯视觉SLAM难以处理动态的障碍物。而IMU能获取自己的运动信息，从某种程度上减轻动态物体的影响。

  • IMU虽然可以测得角速度和加速度，但这些量都存在明显的漂移，使得积分两次得到的位姿数据非常不可靠。相比于IMU，相机数据基本不会有漂移，所以相机数据可以有效地估计并修正IMU读数中的漂移使得在慢速运动后的位姿估计依然有效。

二、IMU和Camera数据融合获取位姿的主要流程

1、利用相机和IMU分别进行图像采集和惯性数据采集，且IMU的采集频率大于相机的采集频率

2、提取相机获取的每一顿图像的特征点，然后提取特征点的描述子，匹配特征点计算相机位姿

3、对IMU得到的多组IMU数据进行预积分，计算出两图像对应的IMU的位姿和速度

4、IMU初始化，这一步的目的是获取IMU参数较好的初始值: 速度、重力以及Bias。

在这里插入图片描述

三、构建视觉残差和惯性残差的统一损失函数进行联合优化

  • 视觉里程计VO通过最小化相关键帧的重投影误差，计算得到相机的位姿和地标的位置
  • IMU对相邻两帧的位姿之间添加约束，而且对每一帧添加了状态量：陀螺仪和加速度的偏差

四、IMU预积分过程

1、IMU测量模型

在这里插入图片描述

角速度是陀螺仪得到的， B是刚体，IMU与相机的物体坐标系，W是世界坐标系，与角速度和陀螺仪的偏置有关系，与陀螺仪存在的噪声有关，

加速度是由R旋转乘加速度减重力加速度的差，加速度计的偏置，噪声

2、IMU运动学模型

在这里插入图片描述
某一时刻的旋转乘角速度， 速度与加速度是有关系的，位姿也可以通过速度求解出来的

3、基于运动学模型，可得t和t+Δt时刻状态关系

相关文章：

IMU预积分的过程详解

一、IMU和相机数据融合保证位姿的有效性： 当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内&#xff…...

编程日记 2023/10/27 14:39:18

TypeScript中的类型运算符

类型运算符 1. keyof运算符 1. 简介 是一个单目运算符，接受一个对象类型作为参数，返回该对象的所有键名组成的联合类型。 type MyObj {foo: number,bar: string, };type Keys keyof MyObj; // foo|bar这个例子keyof MyObj返回MyObj的所有键名组成的…...

编程日记 2023/10/27 14:38:17

【蓝桥杯选拔赛真题03】C++输出字母Y 青少年组蓝桥杯C++选拔赛真题 STEMA比赛真题解析

目录 C/C++输出字母Y 一、题目要求 1、编程实现 2、输入输出 二、算法分析...

编程日记 2023/10/27 14:37:16

redis搭建集群-多实例快速搭建

1.基础的redis.conf的配置 # Redis configuration file example. # # Note that in order to read the configuration file, Redis must be # started with the file path as first argument: # # ./redis-server /path/to/redis.conf# Note on units: when memory size is ne…...

编程日记 2023/10/27 14:36:15

为什么进行压力测试? 有哪些方法?

在信息技术飞速发展的今天，软件系统的性能已经成为了用户满意度的决定性因素之一。而要确保一个系统在实际使用中能够稳定可靠地运行，压力测试就显得尤为关键。本文将深入探讨什么是压力测试，为什么它是如此重要，以及一些常见的压…...

编程日记 2023/10/27 14:35:14

Java开发者必备：支付宝沙箱环境支付远程调试指南

🔥博客主页： 小羊失眠啦. 🔖系列专栏： C语言、Linux、Cpolar ❤️感谢大家点赞👍收藏⭐评论✍️ 文章目录 前言1. 下载当面付demo2. 修改配置文件3. 打包成web服务4. 局域网测试5. 内网穿透6. 测试公网访问7. 配置二级…...

编程日记 2023/10/27 14:34:13

基于STM32温湿度传感器采集报警系统设计

**单片机设计介绍，1648【毕设课设】基于STM32温湿度传感器采集报警系统设计 文章目录 一 概要二、功能设计设计思路 三、 软件设计原理图 五、 程序程序 六、 文章目录 一 概要 这次的设计主要是通过读取DHT11和HCSR04的数值，（Proteus的传感器…...

编程日记 2023/10/27 14:33:12

檢測項目簡體字

某些項目可能要求代碼中不允許使用簡體字 安裝stcheck檢查 yarn add stcheck --dev在項目根目錄創建 st.config.json 文件 {"patterns": ["./**/*.(ts|js|tsx|jsx|vue|html)","!**/node_modules/**","!.git/**"],"gitignore&q…...

编程日记 2023/10/27 14:32:12

适用于嵌入式arm的ffmpeg编解码

在嵌入式arm应用开发中，经常会遇到需要处理视频的情况，这时候就需要强大的开源工具ffmpeg出马了。 这里可以下载到各个版本的ffmpeg。 ffmpeg各版本https://www.videohelp.com/software/ffmpeg/old-versions 现在ffmpeg更新较频繁，如…...

编程日记 2023/10/27 14:31:10

nlp与知识图谱代码解读_词嵌入

目录 词嵌入简单原理代码案例解读专业原理介绍场景 词嵌入 简单原理 可以使用一些比喻和生活中的例子： 老师： 你们还记得玩乐高积木的时候，每个积木块代表了一个特定的事物或形状吗？现在，想象一下，每个词…...

编程日记 2023/10/27 14:30:09

HarmonyOS 音频通话开发指导

常用的音频通话模式包括 VOIP 通话和蜂窝通话。 ● VOIP 通话：VOIP（Voice over Internet Protocol）通话是指基于互联网协议（IP）进行通讯的一种语音通话技术。VOIP 通话会将通话信息打包成数据包，通过网络进…...

编程日记 2023/10/27 14:29:08

LeetCode讲解篇之面试题 01.08. 零矩阵

文章目录 题目描述题解思路题解代码 题目描述 题解思路 遍历矩阵，若当前元素为零，则将该行和该列的第一个元素置零 遍历第一行，若当前元素为零，则将当前列置零 遍历第一列，若当前元素为零，则将当前行置零 …...

编程日记 2023/10/27 14:28:07

安装python虚拟环境

什么是虚拟环境： 虚拟环境的意义，就如同 虚拟机 一样，它可以实现不同环境中Python依赖包相互独立，互不干扰。 环境准备 安装python （到官网下载Download Python​配置环境变量，cmd进入命令行输入 python…...

编程日记 2023/10/27 14:27:06

【App 抓包提示网络异常怎么破？】

背景 当你测试App的时候，想要通过Fiddler/Charles等工具抓包看下https请求的数据情况，发现大部分的App都提示网络异常/无数据等等信息。以“贝壳找房”为例： 455 x 705 Fiddler中看到的请求是这样的： 619 x 215 你可能开始找证书的问题：是不是Fiddler/Charles的证书没有…...

编程日记 2023/10/27 14:25:05

【开发篇】一、处理函数：定时器与定时服务

文章目录 1、基本处理函数2、定时器和定时服务3、KeyedProcessFunction下演示定时器4、process重获取当前watermark 前面API篇完结，对数据的转换、聚合、窗口等，都是基于DataStream的，称DataStreamAPI，如图： 在Flink…...

编程日记 2023/10/27 14:24:04

重入漏洞EtherStore

重入漏洞 // SPDX-License-Identifier: MIT pragma solidity ^0.8.13;contract EtherStore {mapping(address > uint) public balances;function deposit() public payable {balances[msg.sender] msg.value;}function withdraw() public {uint bal balances[msg.sender]…...

编程日记 2023/10/27 14:23:03

账号运营的底层逻辑---获客思维

什么是运营？ 运营是做什么的？ 什么是内容运营？ 什么是活动运营？ 一篇带你搞清楚所有的底层逻辑！...

编程日记 2023/10/27 14:22:02

Pinia中如何实现数据持久化操作

使用vue3中的pinia，我们可以在多个页面间共享数据，但是一旦我们关闭或刷新页面，这些数据就会丢失，因此，我们需要有一种数据持久化的解决方案。在记录vue3 使用vue3中的pinia，我们可以在多个页面间共享数据&…...

编程日记 2023/10/27 14:21:00

【owt-server】RTC视频接收调用流程学习笔记1： Call::CreateVideoReceiveStream 前后

WebRTC源码分析——Call模块 大神提到，call模块是在worker线程创建的。主要创建接收、发送流Call模块是WebRTC会话中不可缺少的一个模块，一个Call对象可以包含多个发送/接收流，且这些流对应同一个远端端点，并共享码率估计。 call中通过webrtc::VideoReceiveStream::Config …...

编程日记 2023/10/27 14:18:59

淘宝商品链接获取淘宝商品评论数据（用 Python实现淘宝商品评论信息抓取）

在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取淘宝多网站上的商品详情页面评论内容。在数据提取方面，可以使用正则表达式、XPath 等方式从 HTML 代码中提取出有用的信息。值得注意的是&#…...

编程日记 2023/10/27 14:17:58

十九、类型信息（1）

本章概要 为什么需要 RTTI RTTI（RunTime Type Information，运行时类型信息）能够在程序运行时发现和使用类型信息 RTTI 把我们从只能在编译期进行面向类型操作的禁锢中解脱了出来，并且让我们可以使用某些非常强大的程序。对 RTTI …...

编程日记 2023/10/27 14:16:57

十八、字符串（3）

本章概要 正则表达式 基础创建正则表达式量词CharSequencePattern 和 Matcherfinde()组（Groups）start() 和 end()Pattern 标记split()替换操作reset()正则表达式与 Java I/0 正则表达式 很久之前，_正则表达式_就已经整合到标准 Unix 工具…...

编程日记 2023/10/27 14:15:55

基于SSM的酒店预约及管理系统设计与实现

末尾获取源码 开发语言：Java Java开发工具：JDK1.8 后端框架：SSM 前端：Vue 数据库：MySQL5.7和Navicat管理工具结合 服务器：Tomcat8.5 开发软件：IDEA / Eclipse 是否Maven项目：是 目录…...

编程日记 2023/10/27 14:14:54

MIxformerV2的onnx和tensorrt加速

MIxformerV2的onnx和tensorrt加速 注意事项 地址：github地址 注意事项 转换成onnx模型之前，最好现简化算法的源代码，使其结构干净。因为在进行onnx转换后，可能在进行onnx→trt时算子不匹配，这时就需要去查看模型的源…...

编程日记 2023/10/27 14:13:54

Kotlin 中let 、run 、with、apply、also的用法与区别

实例代码 User(val userName:String,val age:Int){fun printName(){println(userName)}fun getUserName():String{return userName}} let 函数 let 函数常用来与对象的空判断一起用，起到作用于的限定效果。let 函数最后一行返回值。（比如实例需要let函…...

编程日记 2023/10/27 14:12:53

PHP函数的定义与最简单后门原理

PHP函数的定义与最简单后门原理 文章目录 PHP函数的定义与最简单后门原理函数的定义函数调用的过程变量的范围局部变量全局变量 可变函数动态函数 PHP 最简单后门原理分析 函数的定义 使用function关键字来定义一个函数定义函数的函数名避开关键字形式参数是传递映射的实际参数…...

编程日记 2023/10/27 14:11:51

PlantSimulation访问本地Excel文件的方法

PlantSimulation访问本地Excel文件的方法 PlantSimulation访问本地Excel文件的方法PlantSimulation访问本地Excel文件的方法 //Param StatusTable,T_DataTable:object var T_DataTable:object:=DataTable IF NOT isComputerAccessPermittedMESSageBox("计算机访问被阻止，…...

编程日记 2023/10/27 14:10:50

使用微PE工具箱制作winU盘启动盘~重装系统

1.准备一个大于8G的U盘，为了保证传输和安装速度请确保U盘的质量。 2.鼠标右键点击U盘，进行格式化： 3.下载微PE工具箱： 微PE工具箱 - 下载 4.安装微PE工具箱：选择安装到U盘 5.选择U盘后，开始安装&#xf…...

编程日记 2023/10/27 14:09:49

漏洞复现-jquery-picture-cut 任意文件上传_（CVE-2018-9208）

jquery-picture-cut 任意文件上传_（CVE-2018-9208） 漏洞信息 jQuery Picture Cut v1.1以下版本中存在安全漏洞CVE-2018-9208文件上传漏洞 描述 ​ picture cut是一个jquery插件，以友好和简单的方式处理图像，具有基于bootstrap…...

编程日记 2023/10/27 14:08:48

Golang Websocket框架：实时通信的新选择

前言 在现代应用程序中，实时通信已经成为了一种必需的特性。而Websocket是一种在客户端和服务器之间建立持久连接的协议，可以实现实时的双向通信。Golang作为一门高效且简洁的语言，也提供了一些优秀的Websocket框架，方便开发者构…...

编程日记 2023/10/27 14:07:47