【腾讯 WE 大会】房间里的沉浸式体验,利用空气做触摸反馈
Rajinder Sodhi 专注于研发新型的交互技术,在腾讯 WE 大会上,他带来了两项十分抢眼的交互方式,可让你的房间变成显示器的一部分,以及无需穿戴实现触摸反馈。
显示器和鼠标键盘,这是延续了几十年的计算机交互工具,如今随着触摸屏的应用,动作捕捉技术的成熟,交互革命正来得愈加猛烈。设想一下,将整个房间变成显示器,显示内容结合你房间的 3D 模型,合理安排显示内容,你可以通过触摸操作,那将是一种更加沉浸式的交互体验。
Lumenous 公司创办人 Rajinder Sodhi 就在做这样的产品,他们公司集中在新交互技术的探索,致力于连接虚拟与现实,提供更真实、沉浸式的交互体验。
上述那项技术名叫 RoomAlive,顾名思义,将你的房间变成可变化的内容。这项技术需要依托六台专业投影仪,每个投影单元的内容可相连,再加上景深摄像机,自动扫描房间的三维模型,从而捕获房间的样子,将内容抵消透视效果显示出来。
而与此同时,动作捕捉技术可以让用户直观的去操作,通过身体移动,手掌触摸,即可被捕捉到。比如墙体上有个气泡,用手触摸后,气泡破裂。而由于每个房间里的物体都不一样,有的可能有书架或者茶几等易碎品,在投影不同物体的时候,会非常的谨慎,以防实体物体被磕碰。
它可以玩出很多交互花样,比如虫子从柜子里爬出来,而不是贴在实体表面,虫子可以沿着书柜爬动。用户可以选择拍打虫子,也可以用枪支射击。当用户遭到射击之后,周围墙体会喷射红色,强化逼真效果。
Sodhi 称之为 “物理现实和虚拟现实的连接体”,的确,它不仅有增强现实的特点,也拥有虚拟现实那样的沉浸感。不过它还少了一样,那就是触摸反馈。
触摸反馈也是 Oculus Rift 这类设备最大的缺憾,基于此,Lumenous 公司又在研发另一项技术 Aireal,透过气体来实现反馈。它类似一个喷枪,打出来的是压缩气体,让使用者不用穿戴任何装置就能感受到虚拟物体,体验到动态变化的物体质感。
这款设备是通过 3D 打印制造,结构设计比较复杂,喷嘴的口径有很多选择,结合景深摄像头,让远近不同的用户获得力度适中的触感。它可以结合投影机、Kinect,或者 iPad 使用,让用户可以触摸到虚拟物体。这有点类似 4D 电影,但它更简便,而且触感更细腻。
当多个喷枪围绕用户的时候,它能营造类似环绕声的效果,可以实现全身运动,比如拳击,或者打兵乓球。这些数据不需要单独编程来实现,因为日后所有的触感都会数据化,喷枪只需要调用数据库的内容即可。
Sodhi 展示的 demo 视频中,就将 RoomAlive 与 Aireal 结合起来,一个蝴蝶落在了叶子上,蝴蝶煽动翅膀让叶子摆动,蝴蝶是投影产生的。
目前这些技术还处在早期研发阶段,要真正应用于消费级还早得很。可以预见的是,随着越来越多连接起虚拟和现实的技术诞生,可以让用户足不出户即可获得万千世界的真实触感,未来虚拟和现实还真是傻傻分不清楚。