麻省理工交互视频技术,让你用“原力”“触摸”虚拟世界
看电影时,你和那个瑰丽的虚幻世界,永远隔着一个银幕的距离,你永远只是旁观者。而麻省理工的一项新技术,将让你拥有“触摸”这个世界的神奇能力。
麻省理工学院目前开发出了一种互动视频技术(Interactive Dynamic Video),可以让视频不只是一种“看”的艺术,而变成一种可“触摸”的体验。它可以让你像星球大战中的绝地武士那样在屏幕中制造波澜,即使隔着一个次元的屏障。
(图片来自:YouTube)
根据他们的演示视频,你只需要拖动鼠标就可以让画面中的树轻轻摇动,如微风吹过一般。
(图片来自:YouTube)
可以想象,当把这种技术应用到 VR 中,其视频的互动性就会大大提高,原本虚拟的、固定的物体,变成可触摸的,有实感的。我们与虚拟世界中相隔的那层隐形的屏障,将在我们心中渐渐溶解。
那麻省理工的这些学霸们是如何做到的呢?
事实上,他们并没有利用多么复杂的工具,一套算法、一台普通相机就足够了。
(图片来自:YouTube)
首先他们会先让目标物体颤动起来,并用相机记录这种颤动。之后,他们特别开发的这套算法就可以通过分析物体颤动的频率,分析出这个物体在现实场景中可以进行何种运动,以及运动的幅度。
最后还原出的效果,是那么的自然。
(图片来自:YouTube)
工程师在博客中说明,其实想达到这种效果,最通用的方法是进行 3D 建模,但这样的做法不够经济,想做出像视频这样逼真的效果,在很多场景下也是不太可能,毕竟很多细微的颤动,是那么的微妙,难以捉摸。
这项技术在未来可以应用在桥梁等工程的结构强度模拟上,并简化电影特效师的工作。
此外,项目负责人 Abe Davis 表示,这项技术对 VR 会有巨大影响,会改变观众在虚拟世界中与真实物品互动的体验。
一般 VR 视频中,由于缺少互动性,电影艺术中“第四面墙”的概念并没有消失。也就是说,观众会因为能动性的缺失和故事空间隔绝开来了。他们对于故事来说变成了多余的一部分,变成了旁观者。 这点和 VR 的核心特点——存在感,是相左的。
(图片来自:Oculus Story Studio)
Oculus Story Studio 也在自己的 VR 实验中提到了所谓 The Swayze Effect。 其基本意思是,观众除了能感觉到自己存在于一个世界中以外,他们没有任何有形的触感或感情的连接。换句话说,观众就像穿上了哈利波特的隐形衣,可以窥探这个世界,但是没有任何的连接感。
麻省理工的这项新发明,直指这个痛点。体验者与虚拟现实,冥冥之中通过“触感”,建立起情感的桥梁。