ARKitTrack:一个新的大规模RGB-D跟踪数据集,由iPhone和iPad上配备的消费级激光雷达扫描仪捕获的静态和动态场景,包含300个RGB-D序列、455个目标和229.7K个视频帧。
单位:大连理工大学(卢湖川团队), 鹏城实验室
ARKitTrack: A New Diverse Dataset for Tracking Using Mobile RGB-D Data
主页:https://arkittrack.github.io/
github:https://github.com/lawrence-cj/ARKitTrack
论文:https://arxiv.org/abs/2303.13885
与传统的仅RGB视觉跟踪相比,很少构建用于RGB-D跟踪的数据集。在本文中,我们提出了ARKitTrack,这是一个新的RGB-D跟踪数据集,用于由苹果iPhone和iPad上配备的消费级激光雷达扫描仪捕获的静态和动态场景。ARKitTrack包含300个RGB-D序列、455个目标和229.7K个视频帧。除了边界框注释和帧级属性外,我们还用123.9K像素级目标掩码对该数据集进行了注释。此外,还提供了每个帧的相机固有特性和相机姿态,以供未来的发展。为了证明该数据集的潜在有用性,我们进一步为盒子级和像素级跟踪提供了一个统一的基线,该基线将RGB特征与鸟瞰图表示相集成,以更好地探索跨模态3D几何。深入的经验分析已经验证了ARKitTrack数据集可以显著促进RGB-D跟踪,并且所提出的基线方法与现有技术相比是有利的。