研究人员研发一种手腕设备 可以连续跟踪整个手部情况

时间:2020-7-23

来源:cnBeta 

来自康奈尔大学和威斯康星大学麦迪逊分校的研究人员宣布开发出一种新的腕式设备,能够连续对人类的整个手部进行3D追踪。该设备名为FingerTrak,可以将人手许多位置转化为3D信息,包括20个手指关节位置的信息。 

FingerTrak使用三到四个微型、低分辨率热像仪,读取手腕上的轮廓。研究人员表示,该设备可用于翻译手语或用于虚拟现实。它还可以用于移动医疗、人机互动以及其他领域。该项目的科学家表示,该通过观察手腕轮廓,该技术能够以3D方式高精度重建手指所在的位置。这是第一个能够根据手腕轮廓重建完整手部姿势的系统。 

过去,手腕安装的摄像头太过笨重和碍事,不适合日常使用。尽管体积庞大,但大多数只能重建一些离散的手势。突破性的FingerTrak系统是一个轻巧的手镯,可以让手部自由活动。该设备专注于热成像和机器学习的结合,以虚拟重建手部动作,而不是依靠摄像头直接捕捉手指的位置。 

设备上使用的4个微型热像仪每个都有豌豆大小,可以拍摄多个剪影图像,形成手的轮廓。该系统可以将这些图像结合起来,利用深度神经网络对虚拟手进行3D重建。该技术可以捕捉整个手的姿势,即使手中拿着一个物体。

版权所有:教育部科技发展中心虚拟现实研究中心 京ICP备19006395号