跳到正文
arXiv · cs.RO· Ziyi Kou, Ankit Kumar, Mia Huang, Taylor Niehues, Vatsal Mehta, Ergys Ristani, Li Guan·· 4 小时前AI 评分58

AVI-HT:面向 3D 手套手部跟踪的自适应视觉-IMU 融合方法

AVI-HT: Adaptive Vision-IMU Fusion for 3D Gloved Hand Tracking

AI 导读

作者提出 AVI-HT,将第一视角图像与手套上的 6-DoF IMU 信号联合建模,用于跟踪 3D 手部姿态,在遮挡严重的手-物交互场景中提升精度与可用性。方法包含同步采集的视觉-IMU 与动捕真值配对训练数据,以及跨传感器深度注意力机制,自适应调节对视觉和各 IMU 传感器的信任权重。

来源:arXiv · cs.RO · arxiv.org