除了手势控制的缺点,虚拟现实最尴尬的一点就是看不到手。当你戴上虚拟现实设备,你置身于一个看似真实的世界,让你身临其境。但是当你伸出手,试图抓住你面前的某样东西或够到某样东西时,那里真的什么都不存在,这就瞬间打破了创造的气氛。
微软R&D的一个团队希望被称为手握的手势跟踪技术能够帮助人类与虚拟环境的交互更加自然,不仅是在虚拟现实或增强现实领域,也包括人类与计算机或其他连接设备的交互。
在英国剑桥的微软研究院,设计技术员大卫·斯威尼(david sweeney)告诉记者,现实始于我们与物理世界的互动,而互动的主要方式是我们的手。这是我们平时的认知,我们连这个动作都不去想,一切都是出于人类的直觉。
手机项目始于2014年,该项目的计算机视觉进展于今年早些时候公布。由于这个项目还处于研究阶段,微软邀请记者现场体验。
当记者在现实世界中移动手时,可以看到同步复制的手出现在眼前的屏幕上,可以通过逼真的抓取得到unity engine创建的虚拟对象。斯威尼总结道:这个项目通过获取现实中的深度信息来绘制指针。这类似于跳跃运动。
kinect传感器捕捉深度信息,手骨软件将信息转换成数据点阵,从而恢复手的网格模型(有很多不同的模型可以适应不同大小的手)。本质上,每个数据点都位于手模型的表面,所以它可以像真实的手一样模拟动作。它还通过机器学习将模拟的运动转化为实际的动作。
当使用这项技术时,记者遇到了一些严重的错误,例如当传感器前面有不止一个人时,或者当记者试图靠近他的手时。但是在正常使用过程中,手的每个细节都被完美地捕捉并映射到屏幕上。手势跟踪有一个很大的问题:我们的手是由很多可移动的部分组成的,每一个微小的动作都应该被看作是一个自然的动作。
这项技术让vr更加逼真。在视频中,记者使用oculus rift耳机和手机技术,可以看到他的手戳到了一只兔子,它像通用粘土一样塌陷,类似于一系列虚拟控制器模拟按钮产生的交互信息。
与oculus touch或htc vive controller等触觉设备相比,自己动手的优势在于所有动作都是直观的,即使是从未接触过虚拟现实的人也能轻松上手。
斯威尼说:人类的手已经进化了数百万年,它们如此精致,用电池代替人手是愚蠢的。
有趣的是,斯威尼认为,当你与虚拟现实交互时,触觉反馈(可以感知你触摸的物体)是不必要的,即使游戏中有虚拟的物理物体,就像上面视频中的兔子演示一样,只有虚拟现实中的反馈存在。斯威尼说:心理上,我可以通过虚拟互动来& lsquo感受身体的互动。虽然听起来很荒谬,但已经被记者的实践经验所验证。
精选团队为这个项目的进度、速度和效率感到自豪。该软件旨在调用最少的计算资源,只在cpu上运行,因此您不必担心显卡无法控制创建的丰富虚拟世界。
斯威尼还未能具体说明该项目何时向公众开放。但他暗示,该软件不仅可以在vr或ar设备上运行,还可以让你的手作为低功耗控制器与任何物联网设备进行交互。试想一下,控制灯光的开关只需要用手的一根手指,大概需要和语音识别一起使用。
标题:【游戏产业】未来我们用什么玩VR游戏?不是手柄而是手52pk新闻中心
地址:http://www.gdgzch.com/new/11847.html