当前位置：首页 > news >正文

IMU预积分的过程详解

news 2025/7/10 15:26:18

一、IMU和相机数据融合保证位姿的有效性：

当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内，也能保持一个较好的位姿估计，这是纯视觉
SLAM 无法做到的。
当图像发生变化时，本质上我们没法知道是相机自身发生了运动，还是外界条件发生了变化，所以纯视觉SLAM难以处理动态的障碍物。而IMU能获取自己的运动信息，从某种程度上减轻动态物体的影响。
IMU虽然可以测得角速度和加速度，但这些量都存在明显的漂移，使得积分两次得到的位姿数据非常不可靠。相比于IMU，相机数据基本不会有漂移，所以相机数据可以有效地估计并修正IMU读数中的漂移使得在慢速运动后的位姿估计依然有效。

二、IMU和Camera数据融合获取位姿的主要流程

1、利用相机和IMU分别进行图像采集和惯性数据采集，且IMU的采集频率大于相机的采集频率

2、提取相机获取的每一顿图像的特征点，然后提取特征点的描述子，匹配特征点计算相机位姿

3、对IMU得到的多组IMU数据进行预积分，计算出两图像对应的IMU的位姿和速度

4、IMU初始化，这一步的目的是获取IMU参数较好的初始值: 速度、重力以及Bias。

在这里插入图片描述

三、构建`视觉残差`和`惯性残差`的统一损失函数进行联合优化

视觉里程计VO通过最小化相关键帧的重投影误差，计算得到相机的位姿和地标的位置
IMU对相邻两帧的位姿之间添加约束，而且对每一帧添加了状态量：陀螺仪和加速度的偏差

四、IMU预积分过程

1、IMU测量模型

在这里插入图片描述

角速度是陀螺仪得到的， B是刚体，IMU与相机的物体坐标系，W是世界坐标系，与角速度和陀螺仪的偏置有关系，与陀螺仪存在的噪声有关，

加速度是由R旋转乘加速度减重力加速度的差，加速度计的偏置，噪声

2、IMU运动学模型

在这里插入图片描述
某一时刻的旋转乘角速度，速度与加速度是有关系的，位姿也可以通过速度求解出来的

3、基于运动学模型，可得t和t+Δt时刻状态关系

IMU预积分的过程详解

一、IMU和相机数据融合保证位姿的有效性： 当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内&#xff…...

编程日记 2023/10/27 14:39:18

TypeScript中的类型运算符

类型运算符 1. keyof运算符 1. 简介是一个单目运算符，接受一个对象类型作为参数，返回该对象的所有键名组成的联合类型。 type MyObj {foo: number,bar: string, };type Keys keyof MyObj; // foo|bar这个例子keyof MyObj返回MyObj的所有键名组成的…...

编程日记 2023/10/27 14:38:17

【蓝桥杯选拔赛真题03】C++输出字母Y 青少年组蓝桥杯C++选拔赛真题 STEMA比赛真题解析

目录 C/C++输出字母Y 一、题目要求 1、编程实现 2、输入输出二、算法分析...

编程日记 2023/10/27 14:37:16

1.基础的redis.conf的配置 # Redis configuration file example. # # Note that in order to read the configuration file, Redis must be # started with the file path as first argument: # # ./redis-server /path/to/redis.conf# Note on units: when memory size is ne…...

编程日记 2023/10/27 14:36:15

为什么进行压力测试? 有哪些方法?

在信息技术飞速发展的今天，软件系统的性能已经成为了用户满意度的决定性因素之一。而要确保一个系统在实际使用中能够稳定可靠地运行，压力测试就显得尤为关键。本文将深入探讨什么是压力测试，为什么它是如此重要，以及一些常见的压…...

编程日记 2023/10/27 14:35:14

Java开发者必备：支付宝沙箱环境支付远程调试指南

🔥博客主页： 小羊失眠啦. 🔖系列专栏： C语言、Linux、Cpolar ❤️感谢大家点赞👍收藏⭐评论✍️ 文章目录前言1. 下载当面付demo2. 修改配置文件3. 打包成web服务4. 局域网测试5. 内网穿透6. 测试公网访问7. 配置二级…...

编程日记 2023/10/27 14:34:13

基于STM32温湿度传感器采集报警系统设计

**单片机设计介绍，1648【毕设课设】基于STM32温湿度传感器采集报警系统设计文章目录一概要二、功能设计设计思路三、软件设计原理图五、程序程序六、文章目录一概要这次的设计主要是通过读取DHT11和HCSR04的数值，（Proteus的传感器…...

编程日记 2023/10/27 14:33:12

檢測項目簡體字

某些項目可能要求代碼中不允許使用簡體字安裝stcheck檢查 yarn add stcheck --dev在項目根目錄創建 st.config.json 文件 {"patterns": ["./**/*.(ts|js|tsx|jsx|vue|html)","!**/node_modules/**","!.git/**"],"gitignore&q…...

编程日记 2023/10/27 14:32:12

适用于嵌入式arm的ffmpeg编解码

在嵌入式arm应用开发中，经常会遇到需要处理视频的情况，这时候就需要强大的开源工具ffmpeg出马了。这里可以下载到各个版本的ffmpeg。 ffmpeg各版本https://www.videohelp.com/software/ffmpeg/old-versions 现在ffmpeg更新较频繁，如…...

编程日记 2023/10/27 14:31:10

nlp与知识图谱代码解读_词嵌入

目录词嵌入简单原理代码案例解读专业原理介绍场景词嵌入简单原理可以使用一些比喻和生活中的例子： 老师： 你们还记得玩乐高积木的时候，每个积木块代表了一个特定的事物或形状吗？现在，想象一下，每个词…...

编程日记 2023/10/27 14:30:09

HarmonyOS 音频通话开发指导

常用的音频通话模式包括 VOIP 通话和蜂窝通话。 ● VOIP 通话：VOIP（Voice over Internet Protocol）通话是指基于互联网协议（IP）进行通讯的一种语音通话技术。VOIP 通话会将通话信息打包成数据包，通过网络进…...

编程日记 2023/10/27 14:29:08

LeetCode讲解篇之面试题 01.08. 零矩阵

文章目录题目描述题解思路题解代码题目描述题解思路遍历矩阵，若当前元素为零，则将该行和该列的第一个元素置零遍历第一行，若当前元素为零，则将当前列置零遍历第一列，若当前元素为零，则将当前行置零 …...

编程日记 2023/10/27 14:28:07

安装python虚拟环境

什么是虚拟环境： 虚拟环境的意义，就如同虚拟机一样，它可以实现不同环境中Python依赖包相互独立，互不干扰。环境准备安装python （到官网下载Download Python配置环境变量，cmd进入命令行输入 python…...

编程日记 2023/10/27 14:27:06

【App 抓包提示网络异常怎么破？】

背景当你测试App的时候，想要通过Fiddler/Charles等工具抓包看下https请求的数据情况，发现大部分的App都提示网络异常/无数据等等信息。以“贝壳找房”为例： 455 x 705 Fiddler中看到的请求是这样的： 619 x 215 你可能开始找证书的问题：是不是Fiddler/Charles的证书没有…...

编程日记 2023/10/27 14:25:05

【开发篇】一、处理函数：定时器与定时服务

文章目录 1、基本处理函数2、定时器和定时服务3、KeyedProcessFunction下演示定时器4、process重获取当前watermark 前面API篇完结，对数据的转换、聚合、窗口等，都是基于DataStream的，称DataStreamAPI，如图： 在Flink…...

编程日记 2023/10/27 14:24:04

重入漏洞EtherStore

重入漏洞 // SPDX-License-Identifier: MIT pragma solidity ^0.8.13;contract EtherStore {mapping(address > uint) public balances;function deposit() public payable {balances[msg.sender] msg.value;}function withdraw() public {uint bal balances[msg.sender]…...

编程日记 2023/10/27 14:23:03

账号运营的底层逻辑---获客思维

什么是运营？ 运营是做什么的？ 什么是内容运营？ 什么是活动运营？ 一篇带你搞清楚所有的底层逻辑！...

编程日记 2023/10/27 14:22:02

Pinia中如何实现数据持久化操作

使用vue3中的pinia，我们可以在多个页面间共享数据，但是一旦我们关闭或刷新页面，这些数据就会丢失，因此，我们需要有一种数据持久化的解决方案。在记录vue3 使用vue3中的pinia，我们可以在多个页面间共享数据&…...

编程日记 2023/10/27 14:21:00

【owt-server】RTC视频接收调用流程学习笔记1： Call::CreateVideoReceiveStream 前后

WebRTC源码分析——Call模块大神提到，call模块是在worker线程创建的。主要创建接收、发送流Call模块是WebRTC会话中不可缺少的一个模块，一个Call对象可以包含多个发送/接收流，且这些流对应同一个远端端点，并共享码率估计。 call中通过webrtc::VideoReceiveStream::Config …...

编程日记 2023/10/27 14:18:59

淘宝商品链接获取淘宝商品评论数据（用 Python实现淘宝商品评论信息抓取）

在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取淘宝多网站上的商品详情页面评论内容。在数据提取方面，可以使用正则表达式、XPath 等方式从 HTML 代码中提取出有用的信息。值得注意的是&#…...

编程日记 2023/10/27 14:17:58

ES6从入门到精通：前言

ES6简介 ES6（ECMAScript 2015）是JavaScript语言的重大更新，引入了许多新特性，包括语法糖、新数据类型、模块化支持等，显著提升了开发效率和代码可维护性。核心知识点概览变量声明 let 和 const 取代 var&#xf…...

编程新知 2025/7/7 9:53:50

Rust 异步编程

Rust 异步编程引言 Rust 是一种系统编程语言，以其高性能、安全性以及零成本抽象而著称。在多核处理器成为主流的今天，异步编程成为了一种提高应用性能、优化资源利用的有效手段。本文将深入探讨 Rust 异步编程的核心概念、常用库以及最佳实践。异步编程基础什么是异步…...

编程新知 2025/6/20 11:52:30

浅谈不同二分算法的查找情况

二分算法原理比较简单，但是实际的算法模板却有很多，这一切都源于二分查找问题中的复杂情况和二分算法的边界处理，以下是博主对一些二分算法查找的情况分析。需要说明的是，以下二分算法都是基于有序序列为升序有序的情况&#xf…...

编程新知 2025/7/4 17:40:43

代理篇12|深入理解 Vite中的Proxy接口代理配置

在前端开发中，常常会遇到跨域请求接口的情况。为了解决这个问题，Vite 和 Webpack 都提供了 proxy 代理功能，用于将本地开发请求转发到后端服务器。什么是代理（proxy）？代理是在开发过程中，前端项目通过开发服务器，将指定的请求“转发”到真实的后端服务器，从而绕…...

编程新知 2025/6/17 5:18:28

LINUX 69 FTP 客服管理系统 man 5 /etc/vsftpd/vsftpd.conf

FTP 客服管理系统实现kefu123登录，不允许匿名访问，kefu只能访问/data/kefu目录，不能查看其他目录创建账号密码 useradd kefu echo 123|passwd -stdin kefu [rootcode caozx26420]# echo 123|passwd --stdin kefu 更改用户 kefu 的密码…...

编程新知 2025/7/8 18:18:58