174
81
327
81
很多人会好奇Factor Perception SDK与开源的RTAB-Map是什么关系?有什么区别?简单来说,RTAB-Map最开始就是一个Appearance-Based的SLAM后端,具有极强的回环检测能力和内存管理能力。直到2015年,RTAB-Map才加入了基础的Visual Odometry实现(这套实现其实非常适合新手学习,甚至比视觉SLAM十四讲更适合入门)。后来又陆续加入了对其它VIO和LIO框架的支持,变成了一套通用的SLAM库。RTAB-Map至今没有提供自己的VIO实现,只有VO,因为这套框架的关注点并不在前端。因此要基于RTAB-Map打造一套最强的SLAM解决方案,我们就要补上其前端的短板。如果在RTAB-Map现有的VO基础上加入对IMU的融合,会受限于祖传代码的构造,没法提供最好的实现。因此我们另起炉灶,开发了这套Factor-VIO。Factor Perception SDK包含了闭源的Factor-VIO前端及开源的RTAB-Map后端,这样我们就同时有了SOTA的前端和后端!我们为RTAB-Map做了很多贡献和改进,但很多新特性需要Factor-VIO的支持。大家可以在RTAB-Map的仓库中浏览这些新特性的代码和配置,但如果没有前端提供专用的数据,也只能看看代码,而无法使用(也不是完全不能用,但你要自己搞定那些配套的模型)。Factor-VIO整合了我们这几年在VSLAM方面的众多技术积累,具有极高的精度和鲁棒性。尤其是鲁棒性,我们认为已经逼近了硬件的理论极限。对于双目相机数据的使用,我们使用了一种特殊的非对称方案,像人类一样具有主视眼。静止时算法可以承受长时间的视觉完全遮挡和干扰。运动时可以承受左目(主视眼)短时间的完全遮挡,在非退化轨迹中可以承受右目长时间的完全遮挡。Factor-VIO提供200 Hz的高帧率里程计输出,而且几乎干掉了延迟,以满足更广泛的应用需要,包括高速场景、无人机、AR/VR等。另外对于机器人开发,大家一般需要机器人本体(base_link)的位姿和速度,而不是传感器(camera_frame或imu_frame)的位姿和速度。我们的SDK里提供了自动的坐标转换,只需在URDF中配置OAK相机的安装位置,就可直接提供base_link的位姿和速度(当然还包括协方差)。那怕不是固定安装(比如相机装在机械手上),只要TF是可以实时获取的,同样可以提供自动坐标转换。
odrive_ros2_control作者,RTAB-Map第二大贡献者,姑苏领军,个人咨询免费
技术
21/761
loading
加载中...
Vulkan实现Nanite风格的网格无缝LOD过渡
1.4万播放
Owen来造|蛋壳工艺+3D打印=气动机器人?带你了解破解“蛋壳工艺”
309.1万播放
完整版DeepSeek-R1 671b本地部署 速度瓶颈深度剖析
22.2万播放
转载-卡扣配合-塑料零件结构设计-RAPID DIRECT
1万播放
用树莓派进行眼动追踪(使用GPT代码) | Eye tracking on a Raspberry Pi (with GPT Code)
4165播放
playing
谁说跑VSLAM就得小心翼翼?我们的VIO鲁棒性爆表,放心用,还有200 Hz的高帧率定位输出
1.4万播放
神秘的窗口『反截屏』是什么原理?【SetWindowDisplayAffinity】
5.9万播放
晶振为什么不能放在PCB边缘?
2.6万播放
香是真的香!Rust 内存管理真让人流口水!Rust 内存管理机制速通
1.2万播放
【开源项目57】ONNX-HAWP线条检测
597播放
【教程】铝型材+洞洞板充电墙收纳解决方案
13.4万播放
由浅入深学习Bluespec
595播放
【up自制开源】30分钟拥有自己的具身智能触觉系统!柔性触觉不再遥不可及
6.4万播放
Altium Designer | 6层RK3576主板PCB设计第二课:RK3576的电源PCB设计布局布线 | AD24 | 直播回放
8376播放
【RF电路】RF电路的PCB设计基础
2.4万播放
那些年,我被坑过的开源项目【让编程再次伟大#19】
11万播放
基于不同双目测距算法(sgbm,psm,raft)和yolov8-seg的深度检测
1.1万播放
Rust 编程语言教程:编程相关概念(三)Stack vs Heap
1.9万播放
手残党福音丨铝型材DIY辅助工具大合集
18.8万播放
【疯狂的Rust库】binrw 强大的结构体和二进制数据转换库
2422播放
【官方双语】人类没法创造这种错觉图像(但AI可以)
58.2万播放
CVPR满分论文!即插即用的6D物体姿态估计大模型(BOP排行榜第一)
1.4万播放
Altium Designer | 8层RK3588主板PCB设计第四课:LPDDR4模块的高速PCB布局布线设计 | AD23 | 直播回放
1.1万播放
FPGA图像处理四部曲
1.7万播放
【火焰图🔥】Linux C/C++性能优化分析工具Perf使用教程
3.2万播放
loading
加载中...
客服
顶部