当前位置： 首页 > news >正文

IMU预积分的过程详解

news 2025/11/12 22:02:02

一、IMU和相机数据融合保证位姿的有效性：

  • 当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内，也能保持一个较好的位姿估计，这是纯视觉
    SLAM 无法做到的。

  • 当图像发生变化时，本质上我们没法知道是相机自身发生了运动，还是外界条件发生了变化，所以纯视觉SLAM难以处理动态的障碍物。而IMU能获取自己的运动信息，从某种程度上减轻动态物体的影响。

  • IMU虽然可以测得角速度和加速度，但这些量都存在明显的漂移，使得积分两次得到的位姿数据非常不可靠。相比于IMU，相机数据基本不会有漂移，所以相机数据可以有效地估计并修正IMU读数中的漂移使得在慢速运动后的位姿估计依然有效。

二、IMU和Camera数据融合获取位姿的主要流程

1、利用相机和IMU分别进行图像采集和惯性数据采集，且IMU的采集频率大于相机的采集频率

2、提取相机获取的每一顿图像的特征点，然后提取特征点的描述子，匹配特征点计算相机位姿

3、对IMU得到的多组IMU数据进行预积分，计算出两图像对应的IMU的位姿和速度

4、IMU初始化，这一步的目的是获取IMU参数较好的初始值: 速度、重力以及Bias。

在这里插入图片描述

三、构建视觉残差和惯性残差的统一损失函数进行联合优化

  • 视觉里程计VO通过最小化相关键帧的重投影误差，计算得到相机的位姿和地标的位置
  • IMU对相邻两帧的位姿之间添加约束，而且对每一帧添加了状态量：陀螺仪和加速度的偏差

四、IMU预积分过程

1、IMU测量模型

在这里插入图片描述

角速度是陀螺仪得到的， B是刚体，IMU与相机的物体坐标系，W是世界坐标系，与角速度和陀螺仪的偏置有关系，与陀螺仪存在的噪声有关，

加速度是由R旋转乘加速度减重力加速度的差，加速度计的偏置，噪声

2、IMU运动学模型

在这里插入图片描述
某一时刻的旋转乘角速度， 速度与加速度是有关系的，位姿也可以通过速度求解出来的

3、基于运动学模型，可得t和t+Δt时刻状态关系

相关文章：

IMU预积分的过程详解

一、IMU和相机数据融合保证位姿的有效性： 当运动过快时，相机会出现运动模糊，或者两帧之间重叠区域太少以至于无法进行特征匹配，所以纯视觉SLAM对快速的运动很敏感。而有了IMU，即使在相机数据无效的那段时间内&#xff…...

编程日记 2023/10/27 14:39:18

TypeScript中的类型运算符

类型运算符 1. keyof运算符 1. 简介 是一个单目运算符，接受一个对象类型作为参数，返回该对象的所有键名组成的联合类型。 type MyObj {foo: number,bar: string, };type Keys keyof MyObj; // foo|bar这个例子keyof MyObj返回MyObj的所有键名组成的…...

编程日记 2023/10/27 14:38:17

【蓝桥杯选拔赛真题03】C++输出字母Y 青少年组蓝桥杯C++选拔赛真题 STEMA比赛真题解析

目录 C/C++输出字母Y 一、题目要求 1、编程实现 2、输入输出 二、算法分析...

编程日记 2023/10/27 14:37:16

redis搭建集群-多实例快速搭建

1.基础的redis.conf的配置 # Redis configuration file example. # # Note that in order to read the configuration file, Redis must be # started with the file path as first argument: # # ./redis-server /path/to/redis.conf# Note on units: when memory size is ne…...

编程日记 2023/10/27 14:36:15

为什么进行压力测试? 有哪些方法?

在信息技术飞速发展的今天，软件系统的性能已经成为了用户满意度的决定性因素之一。而要确保一个系统在实际使用中能够稳定可靠地运行，压力测试就显得尤为关键。本文将深入探讨什么是压力测试，为什么它是如此重要，以及一些常见的压…...

编程日记 2023/10/27 14:35:14

Java开发者必备：支付宝沙箱环境支付远程调试指南

🔥博客主页： 小羊失眠啦. 🔖系列专栏： C语言、Linux、Cpolar ❤️感谢大家点赞👍收藏⭐评论✍️ 文章目录 前言1. 下载当面付demo2. 修改配置文件3. 打包成web服务4. 局域网测试5. 内网穿透6. 测试公网访问7. 配置二级…...

编程日记 2023/10/27 14:34:13

基于STM32温湿度传感器采集报警系统设计

**单片机设计介绍，1648【毕设课设】基于STM32温湿度传感器采集报警系统设计 文章目录 一 概要二、功能设计设计思路 三、 软件设计原理图 五、 程序程序 六、 文章目录 一 概要 这次的设计主要是通过读取DHT11和HCSR04的数值，（Proteus的传感器…...

编程日记 2023/10/27 14:33:12

檢測項目簡體字

某些項目可能要求代碼中不允許使用簡體字 安裝stcheck檢查 yarn add stcheck --dev在項目根目錄創建 st.config.json 文件 {"patterns": ["./**/*.(ts|js|tsx|jsx|vue|html)","!**/node_modules/**","!.git/**"],"gitignore&q…...

编程日记 2023/10/27 14:32:12

适用于嵌入式arm的ffmpeg编解码

在嵌入式arm应用开发中，经常会遇到需要处理视频的情况，这时候就需要强大的开源工具ffmpeg出马了。 这里可以下载到各个版本的ffmpeg。 ffmpeg各版本https://www.videohelp.com/software/ffmpeg/old-versions 现在ffmpeg更新较频繁，如…...

编程日记 2023/10/27 14:31:10

nlp与知识图谱代码解读_词嵌入

目录 词嵌入简单原理代码案例解读专业原理介绍场景 词嵌入 简单原理 可以使用一些比喻和生活中的例子： 老师： 你们还记得玩乐高积木的时候，每个积木块代表了一个特定的事物或形状吗？现在，想象一下，每个词…...

编程日记 2023/10/27 14:30:09

HarmonyOS 音频通话开发指导

常用的音频通话模式包括 VOIP 通话和蜂窝通话。 ● VOIP 通话：VOIP（Voice over Internet Protocol）通话是指基于互联网协议（IP）进行通讯的一种语音通话技术。VOIP 通话会将通话信息打包成数据包，通过网络进…...

编程日记 2023/10/27 14:29:08

LeetCode讲解篇之面试题 01.08. 零矩阵

文章目录 题目描述题解思路题解代码 题目描述 题解思路 遍历矩阵，若当前元素为零，则将该行和该列的第一个元素置零 遍历第一行，若当前元素为零，则将当前列置零 遍历第一列，若当前元素为零，则将当前行置零 …...

编程日记 2023/10/27 14:28:07

安装python虚拟环境

什么是虚拟环境： 虚拟环境的意义，就如同 虚拟机 一样，它可以实现不同环境中Python依赖包相互独立，互不干扰。 环境准备 安装python （到官网下载Download Python​配置环境变量，cmd进入命令行输入 python…...

编程日记 2023/10/27 14:27:06

【App 抓包提示网络异常怎么破？】

背景 当你测试App的时候，想要通过Fiddler/Charles等工具抓包看下https请求的数据情况，发现大部分的App都提示网络异常/无数据等等信息。以“贝壳找房”为例： 455 x 705 Fiddler中看到的请求是这样的： 619 x 215 你可能开始找证书的问题：是不是Fiddler/Charles的证书没有…...

编程日记 2023/10/27 14:25:05

【开发篇】一、处理函数：定时器与定时服务

文章目录 1、基本处理函数2、定时器和定时服务3、KeyedProcessFunction下演示定时器4、process重获取当前watermark 前面API篇完结，对数据的转换、聚合、窗口等，都是基于DataStream的，称DataStreamAPI，如图： 在Flink…...

编程日记 2023/10/27 14:24:04

重入漏洞EtherStore

重入漏洞 // SPDX-License-Identifier: MIT pragma solidity ^0.8.13;contract EtherStore {mapping(address > uint) public balances;function deposit() public payable {balances[msg.sender] msg.value;}function withdraw() public {uint bal balances[msg.sender]…...

编程日记 2023/10/27 14:23:03

账号运营的底层逻辑---获客思维

什么是运营？ 运营是做什么的？ 什么是内容运营？ 什么是活动运营？ 一篇带你搞清楚所有的底层逻辑！...

编程日记 2023/10/27 14:22:02

Pinia中如何实现数据持久化操作

使用vue3中的pinia，我们可以在多个页面间共享数据，但是一旦我们关闭或刷新页面，这些数据就会丢失，因此，我们需要有一种数据持久化的解决方案。在记录vue3 使用vue3中的pinia，我们可以在多个页面间共享数据&…...

编程日记 2023/10/27 14:21:00

【owt-server】RTC视频接收调用流程学习笔记1： Call::CreateVideoReceiveStream 前后

WebRTC源码分析——Call模块 大神提到，call模块是在worker线程创建的。主要创建接收、发送流Call模块是WebRTC会话中不可缺少的一个模块，一个Call对象可以包含多个发送/接收流，且这些流对应同一个远端端点，并共享码率估计。 call中通过webrtc::VideoReceiveStream::Config …...

编程日记 2023/10/27 14:18:59

淘宝商品链接获取淘宝商品评论数据（用 Python实现淘宝商品评论信息抓取）

在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取淘宝多网站上的商品详情页面评论内容。在数据提取方面，可以使用正则表达式、XPath 等方式从 HTML 代码中提取出有用的信息。值得注意的是&#…...

编程日记 2023/10/27 14:17:58

HTML 语义化

目录 HTML 语义化HTML5 新特性HTML 语义化的好处语义化标签的使用场景最佳实践 HTML 语义化 HTML5 新特性 标准答案&#xff1a; 语义化标签&#xff1a; <header>&#xff1a;页头<nav>&#xff1a;导航<main>&#xff1a;主要内容<article>&#x…...

编程新知 2025/10/27 5:01:21

Qt/C++开发监控GB28181系统/取流协议/同时支持udp/tcp被动/tcp主动

一、前言说明 在2011版本的gb28181协议中&#xff0c;拉取视频流只要求udp方式&#xff0c;从2016开始要求新增支持tcp被动和tcp主动两种方式&#xff0c;udp理论上会丢包的&#xff0c;所以实际使用过程可能会出现画面花屏的情况&#xff0c;而tcp肯定不丢包&#xff0c;起码…...

编程新知 2025/11/7 3:29:55

前端倒计时误差!

提示：记录工作中遇到的需求及解决办法 文章目录 前言一、误差从何而来？二、五大解决方案1. 动态校准法（基础版）2. Web Worker 计时3. 服务器时间同步4. Performance API 高精度计时5. 页面可见性API优化三、生产环境最佳实践四、终极解决方案架构前言 前几天听说公司某个项…...

编程新知 2025/9/8 23:14:43

《从零掌握MIPI CSI-2: 协议精解与FPGA摄像头开发实战》-- CSI-2 协议详细解析 (一）

CSI-2 协议详细解析 (一&#xff09; 1. CSI-2层定义&#xff08;CSI-2 Layer Definitions&#xff09; 分层结构 &#xff1a;CSI-2协议分为6层&#xff1a; 物理层&#xff08;PHY Layer&#xff09; &#xff1a; 定义电气特性、时钟机制和传输介质&#xff08;导线&#…...

编程新知 2025/11/12 9:28:06

STM32+rt-thread判断是否联网

一、根据NETDEV_FLAG_INTERNET_UP位判断 static bool is_conncected(void) {struct netdev *dev RT_NULL;dev netdev_get_first_by_flags(NETDEV_FLAG_INTERNET_UP);if (dev RT_NULL){printf("wait netdev internet up...");return false;}else{printf("loc…...

编程新知 2025/9/23 20:06:08

汽车生产虚拟实训中的技能提升与生产优化​

在制造业蓬勃发展的大背景下&#xff0c;虚拟教学实训宛如一颗璀璨的新星&#xff0c;正发挥着不可或缺且日益凸显的关键作用&#xff0c;源源不断地为企业的稳健前行与创新发展注入磅礴强大的动力。就以汽车制造企业这一极具代表性的行业主体为例&#xff0c;汽车生产线上各类…...

编程新知 2025/11/12 20:40:52

Nginx server_name 配置说明

Nginx 是一个高性能的反向代理和负载均衡服务器&#xff0c;其核心配置之一是 server 块中的 server_name 指令。server_name 决定了 Nginx 如何根据客户端请求的 Host 头匹配对应的虚拟主机&#xff08;Virtual Host&#xff09;。 1. 简介 Nginx 使用 server_name 指令来确定…...

编程新知 2025/9/6 16:47:17

【2025年】解决Burpsuite抓不到https包的问题

环境&#xff1a;windows11 burpsuite:2025.5 在抓取https网站时&#xff0c;burpsuite抓取不到https数据包&#xff0c;只显示&#xff1a; 解决该问题只需如下三个步骤&#xff1a; 1、浏览器中访问 http://burp 2、下载 CA certificate 证书 3、在设置--隐私与安全--…...

编程新知 2025/11/8 6:29:42

【git】把本地更改提交远程新分支feature_g

创建并切换新分支 git checkout -b feature_g 添加并提交更改 git add . git commit -m “实现图片上传功能” 推送到远程 git push -u origin feature_g...

编程新知 2025/8/15 18:53:03

关于easyexcel动态下拉选问题处理

前些日子突然碰到一个问题&#xff0c;说是客户的导入文件模版想支持部分导入内容的下拉选&#xff0c;于是我就找了easyexcel官网寻找解决方案&#xff0c;并没有找到合适的方案&#xff0c;没办法只能自己动手并分享出来&#xff0c;针对Java生成Excel下拉菜单时因选项过多导…...

编程新知 2025/11/9 3:51:20