当前位置：首页 > news >正文

IMU预积分的过程详解

news 2026/2/9 0:21:25

一、IMU和相机数据融合保证位姿的有效性：

当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内，也能保持一个较好的位姿估计，这是纯视觉
SLAM 无法做到的。
当图像发生变化时，本质上我们没法知道是相机自身发生了运动，还是外界条件发生了变化，所以纯视觉SLAM难以处理动态的障碍物。而IMU能获取自己的运动信息，从某种程度上减轻动态物体的影响。
IMU虽然可以测得角速度和加速度，但这些量都存在明显的漂移，使得积分两次得到的位姿数据非常不可靠。相比于IMU，相机数据基本不会有漂移，所以相机数据可以有效地估计并修正IMU读数中的漂移使得在慢速运动后的位姿估计依然有效。

二、IMU和Camera数据融合获取位姿的主要流程

1、利用相机和IMU分别进行图像采集和惯性数据采集，且IMU的采集频率大于相机的采集频率

2、提取相机获取的每一顿图像的特征点，然后提取特征点的描述子，匹配特征点计算相机位姿

3、对IMU得到的多组IMU数据进行预积分，计算出两图像对应的IMU的位姿和速度

4、IMU初始化，这一步的目的是获取IMU参数较好的初始值: 速度、重力以及Bias。

在这里插入图片描述

三、构建`视觉残差`和`惯性残差`的统一损失函数进行联合优化

视觉里程计VO通过最小化相关键帧的重投影误差，计算得到相机的位姿和地标的位置
IMU对相邻两帧的位姿之间添加约束，而且对每一帧添加了状态量：陀螺仪和加速度的偏差

四、IMU预积分过程

1、IMU测量模型

在这里插入图片描述

角速度是陀螺仪得到的， B是刚体，IMU与相机的物体坐标系，W是世界坐标系，与角速度和陀螺仪的偏置有关系，与陀螺仪存在的噪声有关，

加速度是由R旋转乘加速度减重力加速度的差，加速度计的偏置，噪声

2、IMU运动学模型

在这里插入图片描述
某一时刻的旋转乘角速度，速度与加速度是有关系的，位姿也可以通过速度求解出来的

3、基于运动学模型，可得t和t+Δt时刻状态关系

IMU预积分的过程详解

一、IMU和相机数据融合保证位姿的有效性： 当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内&#xff…...

编程日记 2023/10/27 14:39:18

TypeScript中的类型运算符

类型运算符 1. keyof运算符 1. 简介是一个单目运算符，接受一个对象类型作为参数，返回该对象的所有键名组成的联合类型。 type MyObj {foo: number,bar: string, };type Keys keyof MyObj; // foo|bar这个例子keyof MyObj返回MyObj的所有键名组成的…...

编程日记 2023/10/27 14:38:17

【蓝桥杯选拔赛真题03】C++输出字母Y 青少年组蓝桥杯C++选拔赛真题 STEMA比赛真题解析

目录 C/C++输出字母Y 一、题目要求 1、编程实现 2、输入输出二、算法分析...

编程日记 2023/10/27 14:37:16

1.基础的redis.conf的配置 # Redis configuration file example. # # Note that in order to read the configuration file, Redis must be # started with the file path as first argument: # # ./redis-server /path/to/redis.conf# Note on units: when memory size is ne…...

编程日记 2023/10/27 14:36:15

为什么进行压力测试? 有哪些方法?

在信息技术飞速发展的今天，软件系统的性能已经成为了用户满意度的决定性因素之一。而要确保一个系统在实际使用中能够稳定可靠地运行，压力测试就显得尤为关键。本文将深入探讨什么是压力测试，为什么它是如此重要，以及一些常见的压…...

编程日记 2023/10/27 14:35:14

Java开发者必备：支付宝沙箱环境支付远程调试指南

🔥博客主页： 小羊失眠啦. 🔖系列专栏： C语言、Linux、Cpolar ❤️感谢大家点赞👍收藏⭐评论✍️ 文章目录前言1. 下载当面付demo2. 修改配置文件3. 打包成web服务4. 局域网测试5. 内网穿透6. 测试公网访问7. 配置二级…...

编程日记 2023/10/27 14:34:13

基于STM32温湿度传感器采集报警系统设计

**单片机设计介绍，1648【毕设课设】基于STM32温湿度传感器采集报警系统设计文章目录一概要二、功能设计设计思路三、软件设计原理图五、程序程序六、文章目录一概要这次的设计主要是通过读取DHT11和HCSR04的数值，（Proteus的传感器…...

编程日记 2023/10/27 14:33:12

檢測項目簡體字

某些項目可能要求代碼中不允許使用簡體字安裝stcheck檢查 yarn add stcheck --dev在項目根目錄創建 st.config.json 文件 {"patterns": ["./**/*.(ts|js|tsx|jsx|vue|html)","!**/node_modules/**","!.git/**"],"gitignore&q…...

编程日记 2023/10/27 14:32:12

适用于嵌入式arm的ffmpeg编解码

在嵌入式arm应用开发中，经常会遇到需要处理视频的情况，这时候就需要强大的开源工具ffmpeg出马了。这里可以下载到各个版本的ffmpeg。 ffmpeg各版本https://www.videohelp.com/software/ffmpeg/old-versions 现在ffmpeg更新较频繁，如…...

编程日记 2023/10/27 14:31:10

nlp与知识图谱代码解读_词嵌入

目录词嵌入简单原理代码案例解读专业原理介绍场景词嵌入简单原理可以使用一些比喻和生活中的例子： 老师： 你们还记得玩乐高积木的时候，每个积木块代表了一个特定的事物或形状吗？现在，想象一下，每个词…...

编程日记 2023/10/27 14:30:09

HarmonyOS 音频通话开发指导

常用的音频通话模式包括 VOIP 通话和蜂窝通话。 ● VOIP 通话：VOIP（Voice over Internet Protocol）通话是指基于互联网协议（IP）进行通讯的一种语音通话技术。VOIP 通话会将通话信息打包成数据包，通过网络进…...

编程日记 2023/10/27 14:29:08

LeetCode讲解篇之面试题 01.08. 零矩阵

文章目录题目描述题解思路题解代码题目描述题解思路遍历矩阵，若当前元素为零，则将该行和该列的第一个元素置零遍历第一行，若当前元素为零，则将当前列置零遍历第一列，若当前元素为零，则将当前行置零 …...

编程日记 2023/10/27 14:28:07

安装python虚拟环境

什么是虚拟环境： 虚拟环境的意义，就如同虚拟机一样，它可以实现不同环境中Python依赖包相互独立，互不干扰。环境准备安装python （到官网下载Download Python配置环境变量，cmd进入命令行输入 python…...

编程日记 2023/10/27 14:27:06

【App 抓包提示网络异常怎么破？】

背景当你测试App的时候，想要通过Fiddler/Charles等工具抓包看下https请求的数据情况，发现大部分的App都提示网络异常/无数据等等信息。以“贝壳找房”为例： 455 x 705 Fiddler中看到的请求是这样的： 619 x 215 你可能开始找证书的问题：是不是Fiddler/Charles的证书没有…...

编程日记 2023/10/27 14:25:05

【开发篇】一、处理函数：定时器与定时服务

文章目录 1、基本处理函数2、定时器和定时服务3、KeyedProcessFunction下演示定时器4、process重获取当前watermark 前面API篇完结，对数据的转换、聚合、窗口等，都是基于DataStream的，称DataStreamAPI，如图： 在Flink…...

编程日记 2023/10/27 14:24:04

重入漏洞EtherStore

重入漏洞 // SPDX-License-Identifier: MIT pragma solidity ^0.8.13;contract EtherStore {mapping(address > uint) public balances;function deposit() public payable {balances[msg.sender] msg.value;}function withdraw() public {uint bal balances[msg.sender]…...

编程日记 2023/10/27 14:23:03

账号运营的底层逻辑---获客思维

什么是运营？ 运营是做什么的？ 什么是内容运营？ 什么是活动运营？ 一篇带你搞清楚所有的底层逻辑！...

编程日记 2023/10/27 14:22:02

Pinia中如何实现数据持久化操作

使用vue3中的pinia，我们可以在多个页面间共享数据，但是一旦我们关闭或刷新页面，这些数据就会丢失，因此，我们需要有一种数据持久化的解决方案。在记录vue3 使用vue3中的pinia，我们可以在多个页面间共享数据&…...

编程日记 2023/10/27 14:21:00

【owt-server】RTC视频接收调用流程学习笔记1： Call::CreateVideoReceiveStream 前后

WebRTC源码分析——Call模块大神提到，call模块是在worker线程创建的。主要创建接收、发送流Call模块是WebRTC会话中不可缺少的一个模块，一个Call对象可以包含多个发送/接收流，且这些流对应同一个远端端点，并共享码率估计。 call中通过webrtc::VideoReceiveStream::Config …...

编程日记 2023/10/27 14:18:59

淘宝商品链接获取淘宝商品评论数据（用 Python实现淘宝商品评论信息抓取）

在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取淘宝多网站上的商品详情页面评论内容。在数据提取方面，可以使用正则表达式、XPath 等方式从 HTML 代码中提取出有用的信息。值得注意的是&#…...

编程日记 2023/10/27 14:17:58

Python爬虫实战：研究MechanicalSoup库相关技术

一、MechanicalSoup 库概述 1.1 库简介 MechanicalSoup 是一个 Python 库，专为自动化交互网站而设计。它结合了 requests 的 HTTP 请求能力和 BeautifulSoup 的 HTML 解析能力，提供了直观的 API，让我们可以像人类用户一样浏览网页、填写表单和提交请求。 1.2 主要功能特点…...

编程新知 2025/10/10 18:13:55

DockerHub与私有镜像仓库在容器化中的应用与管理

哈喽，大家好，我是左手python！ Docker Hub的应用与管理 Docker Hub的基本概念与使用方法 Docker Hub是Docker官方提供的一个公共镜像仓库，用户可以在其中找到各种操作系统、软件和应用的镜像。开发者可以通过Docker Hub轻松获取所…...

编程新知 2025/10/8 10:56:25

在HarmonyOS ArkTS ArkUI-X 5.0及以上版本中，手势开发全攻略：

在 HarmonyOS 应用开发中，手势交互是连接用户与设备的核心纽带。ArkTS 框架提供了丰富的手势处理能力，既支持点击、长按、拖拽等基础单一手势的精细控制，也能通过多种绑定策略解决父子组件的手势竞争问题。本文将结合官方开发文档&#xff0c…...

编程新知 2025/9/19 4:31:58

安宝特方案丨XRSOP人员作业标准化管理平台：AR智慧点检验收套件

在选煤厂、化工厂、钢铁厂等过程生产型企业，其生产设备的运行效率和非计划停机对工业制造效益有较大影响。随着企业自动化和智能化建设的推进，需提前预防假检、错检、漏检，推动智慧生产运维系统数据的流动和现场赋能应用。同时，…...

编程新知 2026/2/5 17:57:20

论文浅尝 | 基于判别指令微调生成式大语言模型的知识图谱补全方法（ISWC2024）

笔记整理：刘治强，浙江大学硕士生，研究方向为知识图谱表示学习，大语言模型论文链接：http://arxiv.org/abs/2407.16127 发表会议：ISWC 2024 1. 动机传统的知识图谱补全（KGC）模型通过…...

编程新知 2026/1/31 12:03:23

ardupilot 开发环境eclipse 中import 缺少C++

目录文章目录目录摘要1.修复过程摘要本节主要解决ardupilot 开发环境eclipse 中import 缺少C++，无法导入ardupilot代码，会引起查看不方便的问题。如下图所示 1.修复过程 0.安装ubuntu 软件中自带的eclipse 1.打开eclipse—Help—install new software 2.在 Work with中…...

编程新知 2026/1/31 5:06:34