跳到正文
原文
arXiv cs.LG· JiaCheng Ge, SiYu Zhang, ShengJie Li, XinTong Yang·· 27 天前AI 评分25

EVFormer:用于第一视角双手姿态估计的视觉-肌电双向注意力模型

EVFormer: An Egocentric Vision-EMG Bidirectional Attention Model for Bimanual Hand Pose Estimation

AI 导读

EVFormer 结合当前 RGB 帧与前 200 ms 双腕表面肌电(sEMG)信号,通过双向交叉注意力与门控融合估计 44 个手指及手腕关节角度。在公开 EgoEMG 数据集测试中,EVFormer 取得 11.482 度的平均绝对误差,相比纯视觉基线和后期融合分别降低 13.20% 与 14.23%。此外,该模型在评估的 5 类手势中有 4 类取得最低误差。

来源:arXiv cs.LG · arxiv.org