手势识别手环方案TapID通过骨传导技术实现VR交互

vr2Vr2 2021-3-22 454 0

近期,苏黎世联邦理工学院计算机科学院的科研人员公布了一项基于骨传导技术的手势识别手环方案:TapID。据悉,该方案采用手环形态,并配备运动传感器和机器学习算法,可通过识别手指敲击平面的动作来识别每个手指动作,用来模拟键盘输入等交互。

TapID_3-810x369

据了解,为了验证TapID的效果,科研人员在VR中创建了一个多屏幕虚拟办公环境,结合VR头显的光学手势识别功能,可进一步提升手指追踪的准确性。此外,TapID可识别各种打字速度和多种敲击平面(桌面或手臂),可实现五种VR交互。

1)编辑文档:

利用TapID方案,你可以通过手指在平面上敲击,实现在VR中编辑Word或PowerPoint文档,也可以利用左手小拇指来控制光标,通过移动光标来实现复制粘贴。

2)整理照片:

VR会将虚拟照片固定在桌面上,你可以用手势敲击桌面上的虚拟控制键来调整照片的方向,也可以与桌面互动来移动和放大照片。

3)计算数字:

TapID方案可模拟计算器,你只需要在桌面上敲敲手指就能与VR中的计算器互动。

4)弹钢琴:

TapID可模拟VR虚拟钢琴键,从演示视频来看,TapID的灵敏度足够好,可以弹奏一首一般速度的曲子。

5)皮肤交互:

你可以将自己的身体作为敲击平面,将手臂等身体部位作为虚拟界面,通过点击或滑动来控制(旋转、放大、缩小)虚拟内容。

总之,基于骨传导和表面敲击识别原理的手环方案是一项有趣的研究方向,应用场景也比较灵活,可以将任何表面变成输入界面。

ezgif-4-988b616c32aa
ezgif-4-0696ba2300cd
TapID_2
TapID_1

点赞 0 收藏 0
国内最大的 Vision Pro 内容平台 - 创造家

评论 (0)