万万没想到,今年春天 VR 厂商们为“一双手”卷起来了。
仅 2022 年上半年,就有四家 VR 巨头对自家 VR 设备的手势交互技术操刀改良。
4 月 20 日,Meta 旗下的 VR 头显 Oculus Quest 2 手势交互版本迭代至 2.0,解决了手部定位丢失的问题。4 月 13 日,字节跳动旗下的 VR 品牌 Pico 宣布其两款企业级 VR 头显可以通过定制的手部追踪配件,提升手势交互体验。VR 厂商 HTC 也在今年 1 月发布了一款新款腕式追踪器,辅助预测用户的手部位置。
无论是裸手交互技术,还是手部追踪配件,用于 VR 设备的手势交互技术一直在不断迭代。同时,不少 VR 企业还在尝试寻找新的手势交互方式,比如说 VR 手套。
5 月 6 日,荷兰 VR 手套制造商 Manus 宣布其新款采用磁力追踪技术的 VR 手套 Quantum Metagloves 开启预售。5 月 4 日,国内动捕技术巨头诺亦腾发布 Hi5 2.0 VR 交互手套。而早在 2021 年 11 月,Meta 就曾展现自家的 VR 触感手套模型,分享自己在 VR 手势交互方面的最新成果。
不仅如此,苹果、谷歌、微软等一些潜在 VR 玩家还获批多项与智能戒指有关的专利,试图将智能戒指打造为下一代手势交互的关键输入设备。
手势交互技术是最基础也是最自然的交互方式,也是 VR 设备中主流的交互方式之一。一般来说,手势交互是指通过数学算法来识别人类手势的技术,包括图像获取、手势追踪、手势识别与分析等多个过程。
其中,手部追踪和手势识别是手势交互中较为关键的两个步骤。手部追踪是指准确地在 VR 头显中定位用户双手的位置,而如何精准地识别每个手指的动作,识别手的各种形态等属于手势识别。
手势交互技术也暗藏巨大的市场空间。国际市场分析公司 Markets and Markets 发表报告称,2024 年“手势识别和无触碰感知”市场将达到 340 亿美元。
VR 设备的手势交互技术有了哪些新玩法?厂商为何都在近期升级自家 VR 设备的手势交互技术?VR 设备的手势交互技术发展究竟如何?
我们与诺亦腾 CTO 戴若犁、梦想绽放(爱奇艺智能)技术负责人史明以及 HTC 的技术负责人等多位行业人士深度交流后,试图找到答案。
抛开手柄,VR 游戏可以裸手玩
相较于其他移动设备,用于 VR 设备的手势交互技术进步较为缓慢。比如说,从 3dof 到 6dof 经历了近五年的发展时间,手柄交互到裸手交互仍处在初期阶段。随着技术不断进步,裸手交互也开始在不少消费级 VR 头显上普及。
Meta 曾在 2019 年发布手势交互 1.0 版本,并将裸手交互引入 Oculus Quest VR 头显,让用户可以直接在虚拟世界中看到自己的双手,并进行一些简单的交互操作。时隔 2 年后,Oculus Quest 2 拥有了手势交互 2.0 版本。
此次升级主要解决了两大难题。一是解决了用户双手重叠时,手部追踪困难的问题。在 Quest 2 的手势交互 1.0 版本中,当用户的双手相互阻挡或重叠时,系统很难识别用户的手势动作。二是在用户快速挥动双手时,系统也很容易丢失对于手部的追踪。这两种情况的发生都有可能会造成双手从虚拟世界中突然消失。