RealSense D455的标定并运行VINS-FUSION

手把手教你用D455和VINS-Fusion实现室内稠密建图(附完整配置文件) 本文提供了一份详尽的实战指南,教你如何利用英特尔RealSense D455深度相机与VINS-Fusion框架,结合表面元素映射技术,实现高精度的室内稠密建图。内容涵盖从环境搭建、传感器标定、VINS-Fusion配置与调试,到集成SurfelMapping生成稠密三维模型的完整流程,适合开发者和研究者快速上手。 阅读详情
AI摘要

本文详细介绍了如何将Intel RealSense D455摄像头与VINS-FUSION进行集成,包括安装RealSense SDK 2.0和realsense-ros,配置并运行VINS-FUSION,以及进行相机和IMU的标定。过程中涉及修改VINS-FUSION的config文件,调整realsense-ros的launch文件,以及使用kalibr进行多传感器联合标定。文章还提供了标定过程中的注意事项,如检查相机健康状态,确保数据同步等,旨在实现稳定且精准的定位效果。

一、使用D455运行VINS-FUSION

1.1 RealSense D455的使用

1.1.1 Intel® RealSense™ SDK 2.0的安装

安装过程可以参照官网教程.
Reconnect the Intel RealSense depth camera and run: realsense-viewer to verify the installation.
使用D455相机的原装usb线到电脑(接口最好是usb3.0,否则可能导致数据传输过慢而使得数据无法实时传输,出现画面卡住的现象),并且打开一个终端输入

realsense-viewer

看这个软件能否打开来验证是否成功安装。
成功的界面如下:
realsense-viewer我们通过左边的选项打开imu,双目和rgb相机模块,同时可以查看各个模块的参数并进行设置
设置模块

1.1.2 realsense-ros的安装编译

安装过程可以参考官网教程.跟着README.md进行安装就可以了
安装编译完之后,插上相机,打开一个终端

source ~/catkin_ws/devel/setup.bash
roslaunch realsense2_camera rs_camera.launch

注意:这个时候要关掉realsense-viewer,看到如图就是启动成功了
realsense启动成功
主要看RealSense Node IS Up!,如果报错显示运动模块没有启动成功,拔掉usb重新插一下,或者重新运行launch文件,像屏幕中这种错误warning就没有影响

再打开一个新的终端

rostopic list

就可以看到这个相机发布的所有topic 如图

topic

打开一个终端

rviz

Fixed Frame选择camera_link(连接realsense数据),通过Add添加topic:/camera/imu、camera/infra1/image_rect_raw、/camera/infra2/image_rect_raw后可以看到如下结果为准(说明可以成功读取到加速计、陀螺仪、双目数据,陀螺仪无法可视化)
rviz

2.1 VINS-FUSION的安装编译

  1. 安装ROS 根据你的Ubuntu版本安装对应的ROS版本,安装过程可以参照ROS官方教程
  2. 安装ceres可以参照ceres官方教程.
  3. 下载编译VINS-FUSION
cd ~/catkin_ws/src
git clone https://github.com/HKUST-Aerial-Robotics/VINS-Fusion.git
cd ../
catkin_make
source ~/catkin_ws/devel/setup.bash
#或者 echo "source ~/catkin_ws/devel/setup.bash" >> ~/.bashrc
#这样就不用每次打开一个新终端都要source一次了

VINS-FUSION/config/下放着各种config文件,这里也有realsense-d435i的配置文件,我们复制这个文件夹并改名为realsense-d455。

2.2 使用D455运行VINS-FUSION

2.2.1 修改VINS-FUSION中的config文件

这里我们运行双目加IMU的,进入到catkin_ws/src/realsense-ros/realsense2_camera/launch/realsense-d455(刚刚我们复制的)

  1. 修改realsense_stereo_imu_config.yaml

realsense_stereo_imu_config.yaml的topic改成D455相机的topic,输出的路径也改成你自己,图片的高和宽也要修改,如图所示:
修改topic

  1. 修改left.yaml和right.yaml
    修改相机图片的尺寸为D455的
    在这里插入图片描述
    保存,修改config文件不需要重新编译工程
2.2.2 修改realsense-ros中的launch文件

进入到catkin_ws/src/realsense-ros/realsense2_camera/launch/中打开rs_camera.launch(可以对原先的文件做一个备份)

  1. 打开双目,修改图片的width、height
    打开双目
  2. 打开imu的加速度计和陀螺仪并合并为一个topic
    打开加速度计和陀螺仪
    合并为一个topic
    保存,修改launch不需要重新编译工程
2.2.3 运行VINS-FUSION
  1. 打开一个终端 ,用roslaunch 打开realsense摄像头
source ~/catkin_ws/devel/setup.bash
roslaunch realsense2_camera rs_camera.launch
  1. 打开一个终端,用于打开rviz`
source ~/catkin_ws/devel/setup.bash
roslaunch vins vins_rviz.launch
  1. 打开一个终端,跑起来
source ~/catkin_ws/devel/setup.bash
rosrun vins vins_node ~/catkin_ws/src/VINS-Fusion/config/yourconfig_path/your_config_file.yaml 
#我的是rosrun vins vins_node ~/catkin_ws/src/VINS-Fusion/src/VINS-Fusion-master/config/realsense_d455/realsense_stereo_imu_config.yaml

三个终端运行成功的话,你的rviz会有数据,特征点和frame的pose
如图所示
未标定运行
相机还没有标定,轨迹特别抖,下面我们对D455相机进行标定

二、对D455进行标定

我们使用kalibr对相机进行标定,code_utils和imu_utils对imu进行标定,但是这个标定出来是没有重力加速度的。因此我们首先要看一下我们相机的加速度在静置的时候是不是正常的,正常的话我们加速度计的g_norm: 9.82左右(可以打开realsense-viewer,开启Motion Module 鼠标放在Accel上面查看)如图
在这里插入图片描述

如果不正常,例如我校准前的g_norm为9.13左右,你再怎么标定,最后运行VINS-FUSION都是抖的。

2.1 校准IMU

如果你的设备imu的加速度计是正常的,那你可以跳过以下的校准过程。

我们采用官方的方法对imu进行校准
可以参考https://dev.intelrealsense.com/docs/imu-calibration-tool-for-intel-realsense-depth-camera
使用官方的校准脚本按照指示进行校准
官方校准工具
校准完之后我们会发现加速度计的值变成9.82左右,恢复正常。要是标定出来的结果的相机的重投影误差Reprojection error在0.15以上的话,当排除是标定过程不够规范的情况下,我们就要思考是不是相机健康状态的问题了。因此建议都进行相机健康状态的检查,避免浪费时间。

2.2 检查相机的健康状态

我们可以参照https://dev.intelrealsense.com/docs/calibration对相机进行各种校准
相机的3种校准方式
我们使用realsense-viewer的Self Calibration查看相机的健康状态。
查看相机健康状态
具体的可以看链接中的官方教程
如果健康状态不佳,我们再使用Dynamic Calibration进行校准,要是结果还是不好,我们就使用Custom Calibration进行校准。

2.3 下载编译code_utils

  1. 创建ros工作空间,用于code_utils以及后面的imu_utils,工作空间名和路径可以自己更改,code_utils和imu_utils都是imu标定需要用到的,用于标定imu噪声密度以及随机游走系数
mkdir -p ~/imu_catkin_ws/src
cd ~/imu_catkin_ws/src
catkin_init_workspace
cd ..
catkin_make
source ~/imu_catkin_ws/devel/setup.bash
  1. 下载编译code_utils
cd ~/imu_catkin_ws/src
git clone git@github.com:gaowenliang/code_utils.git
cd ..
catkin_make

可能出现以下报错:
(1)catkin_make时出现libdw.h没有找到
问题1
解决方法:

sudo apt-get install libdw-dev

(2)catkin_make时出现backward.hpp没有找到
问题2
解决方法:将sumpixel_test.cpp中# include "backward.hpp"改为:#include “code_utils/backward.hpp”

2.3 下载编译imu_utils

cd ~/imu_catkin_ws/src/
git clone git@github.com:gaowenliang/imu_utils.git
cd ..
catkin_make

2.4 下载编译Kalibr

参考官方教程https://github.com/ethz-asl/kalibr/wiki/i

使用Realsense D435i运行VINS-Fusion并建图 未完… 2 安装测试realsense的ROS包 安装: cd ~/catkin_ws/src git clone https://github.com/intel-ros/realsense.git cd .. catkin_make rospack profile source devel/setup.sh 中间可能报错缺少ddynamic_reconfigure,请到github下载代码直接放置到你的catkin_ws/src中。 注:安装以下(不装的话,我的电脑运行一会儿就出错,忘记记录错误了,大 阅读详情

相关推荐

Realsense D455 标定+运行VINS-MONO

参考:https://blog.csdn.net/qq_41839222/article/details/86552367 标定参考:https://blog.csdn.net/xiaoxiaoyikesu/article/details/105646064 安装kalibr:https://github.com/ethz-asl/kalibr/wiki/installation 问题1:在安装依赖sudo pip install python-igraph --upgrade时,报错: Command "

weixin_43242765的博客 4670

D455相机标定 双目+imu(一)

首先配置D455启动文件,将rs_camera.launch里改为如下内容,将将accel和gyro的数据合并得到imu话题。

weixin_62952541的博客 1703

VINS-Fusion 实战指南:从环境搭建到多传感器融合部署

本文详细介绍了VINS-Fusion多传感器融合方案的实战指南,从环境搭建到多传感器部署的全流程。涵盖Ubuntu系统配置、Ceres Solver安装避坑、源码编译技巧,以及双目相机、IMU等传感器的数据集实战和真实相机部署案例。特别适合无人机、自动驾驶和AR/VR开发者快速掌握VINS-Fusion在精准定位中的应用。

weixin_30839881的博客 440

D455+VINS-Fusion+Octomap:从点云到八叉树栅格地图的完整实现

本文详细介绍了基于Intel RealSense D455深度相机、VINS-Fusion视觉惯性里程计和Octomap八叉树地图库的完整SLAM实现流程。内容涵盖从环境搭建、驱动安装、源码修改、数据流配置到实战建图与Rviz可视化的全过程,并提供了关键参数调优与地图质量优化的进阶技巧,帮助开发者构建可用于机器人导航的实时3D环境模型。

blue42的博客 625

RealSense D455 跑通 VINS-FUSION:IMU 与外参标定完整指南

视觉惯性里程计(VINS)是机器人定位与导航中的核心融合技术,它通过相机与惯性测量单元(IMU)的互补特性,在无 GPS 环境下实现高精度姿态与轨迹估计。而传感器标定,尤其是 IMU 噪声参数与相机-IMU 外参,直接决定了融合系统的初始化速度与长期稳定性。Intel RealSense D455 作为常见视觉传感器,虽自带出厂内参,但 IMU 噪声密度、随机游走及外参仍需自行标定,且其参数与 D435i 并不完全通用。本文以 D455 为例,系统讲解 IMU 标定、kalibr 联合标定、VINS-FUS

weixin_34259232的博客 379

避坑指南:用D455跑VINS-Fusion前,你的相机标定文件真的对了吗?

本文详细解析了D455深度相机在VINS-Fusion系统中的标定关键问题,对比了出厂参数与自行标定的精度差异,提供了实用的标定流程和参数验证技巧,帮助开发者避免常见的参数陷阱,提升视觉惯性里程计的精度和稳定性。

weixin_42522964的博客 391

ROS2 Humble下D455深度相机与VINS-Fusion的实战部署与QoS调优

本文详细介绍了在ROS2 Humble环境下部署Intel RealSense D455深度相机与VINS-Fusion的实战步骤,重点解析了QoS调优与性能优化策略。通过硬件连接、软件配置、参数调整和常见问题排查,帮助开发者实现高精度的视觉惯性里程计系统,适用于SLAM等机器人应用场景。

weixin_30642561的博客 432

JMeter压测Dubbo接口的完整落地方案(适配3.x)

Dubbo作为主流Java微服务RPC框架,其接口压测长期面临协议私有、注册发现复杂、序列化耦合度高等技术门槛。理解Dubbo基于TCP长连接、泛化调用与SPI扩展机制的核心原理,是实现稳定压测的前提;技术价值在于绕过HTTP网关直击服务核心链路,保障大促等关键场景的性能可信度;典型应用场景包括电商订单链路压测、风控/库存等内部Dubbo服务SLA验证,以及CI/CD中性能左移实践。本文聚焦Dubbo 3.x版本,提供零第三方插件、可复用、避坑的JMeter Java Sampler落地路径。

weixin_33700809的博客 552

从零构建NVENC编码器:一个游戏开发者的实战手册

本文详细介绍了如何从零构建NVENC编码器,特别针对游戏开发者提供实战指南。内容涵盖NVENC基础概念、DirectX纹理捕获、异步编码优化及高级特性配置,帮助开发者高效集成硬件编码技术到游戏引擎中,实现高性能游戏录制和直播功能。重点解析了NVIDIA专用编码芯片的优势与API使用技巧。

weixin_29292431的博客 366

EBS开发_离散工单创建API

--以下代码于20171213在TONY环境中实现 DECLARE     l_iface_rec    wip.wip_job_schedule_interface%ROWTYPE; --工单任务接口表     l_group_id     NUMBER;     l_returnstatus VARCHAR2(40);     l_errormsg     VARCHAR2(2000

蜗牛先生快跑的博客 2600

STM32驱动直流有刷电机:H桥、死区与PWM调速实战

直流有刷电机是嵌入式系统中最基础的执行器之一,其核心控制逻辑围绕H桥拓扑展开——通过四个开关管组合实现启停、正反转与调速。理解死区时间(Dead Time)对防止上下管直通、保障硬件安全至关重要;而PWM调速的本质是调节电机端口平均电压,需结合互补输出与占空比映射实现平滑响应。该技术广泛应用于智能小车、电动工具及工业控制器等场景,尤其在STM32平台配合HAL库与高级定时器(如TIM1)时,可构建高鲁棒性、可复用的电机驱动框架。

weixin_42593701的博客 783

基因组研究之单倍型T2T基因组(一)

单倍型T2T基因组(Haplotype-resolved T2T genome)是一种高精度、高连续性、高完整性的基因组组装技术,它能够提供从端粒到端粒的完整基因组序列,包括所有的基因和非编码序列。完整覆盖:T2T基因组覆盖从端粒到端粒的染色体序列,包含所有的基因和非编码序列,包括以往难以解析的端粒和着丝粒区域。单倍型解析:单倍型T2T基因组能够区分来自父母本的遗传信息,进行亚基因组不对称演化研究,挖掘单倍型等位基因间的表达差异,这对于重测序、性状定位、进化、基因功能、基因编辑等研究至关重要。

2401_89507557的博客 2448

Visual MODFLOW Flex 6.1新手入门:从数据导入到3D建模的完整工作流解析

本文为Visual MODFLOW Flex 6.1新手提供了从零开始构建地下水数值模型的完整工作流指南。详细解析了从项目规划、数据准备与导入,到构建三维概念模型、生成并运行数值模型,直至结果可视化与校准的核心步骤。帮助水文地质与环工领域初学者快速掌握这一专业软件,高效完成从数据到三维建模的全过程。

a1b2c的博客 819

从零实战:模拟Soul/陌陌附近的人接口爬虫(设备指纹·加密逆向·动态代理全解)

在移动互联网流量见顶的今天,LBS(基于位置的服务)社交平台——尤其是Soul和陌陌——依然掌握着海量高活用户的地理位置画像、兴趣标签、在线活跃时段等敏感数据。对于市场调研、流量运营、甚至是城市热力分析而言,“附近的人”接口是一个极具价值的入口。然而,这两款App均采用全参数加密 + 设备指纹风控 + WAF动态防御的三重护城河。直接使用Requests库调用公开API无异于以卵击石。本文将从逆向工程视角出发,完整还原一套可用的附近人信息采集方案,涵盖:抓包与流量分析(绕过SSL Pinning)

2201_76125261的博客 223

【数字孪生与仿真技术】05:从原理到实战:MATLAB/Simulink在航空航天GNC系统开发中的深度解析(含全流程代码与认证指南)

摘要:本文系统阐述MATLAB/Simulink在航空航天制导、导航与控制(GNC)系统开发中的核心应用。通过解析GNC系统高保真动力学建模、多源导航传感器融合、鲁棒控制算法设计等关键技术原理,结合Virgin Orbit运载火箭、CubeSat等真实案例,展示从需求分析、模型搭建、仿真验证到代码生成与认证的完整开发流程。文中提供1200余行关键代码、8个可复用Simulink模型及详细执行结果展示,涵盖DO-178C认证支持、实时性能优化等工业级开发规范,为航空航天工程师、科研人员提供可落地的参考方案。

专注于人工智能、软件开发、工控自动化、工厂数字化及智能化等领域,希望和大家共同进步! 1660

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

迈瑞BS系列全自动生化分析仪LIS协议接口手册(内含HL7和ASTM)

迈瑞BS系列全自动生化分析仪LIS协议接口手册,内含HL7和ASTM)

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

下一篇: word中如何在方框中打√
Z_Jin16
博客等级 码龄9年 20粉丝 2原创
评论 62
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值
⌂ 换网址