《Alteration》:这部 VR 电影用上了 Facebook 的风格转移算法
在 VR 电影《Alteration》中,男主角 Alexandro 志愿参与了一个科学实验。他没有意识到,研究人员在做一项危险的研究。这些人想操控他的潜意识,用人工智能 Elsa 取代他对妻子的所有记忆。为了在影片中展现人工智能,电影导演 Jerome Blanquet 找到了 Facebook 的人工智能研究员。
Blanquet 想以视觉化的方法展现人工智能操控意识的过程。最初,他想用传统的动画工具,但后来,他了解到 Facebook 的人工智能研究员开发了一种风格转移算法。于是,他开始思考能否将其应用到 VR 电影之上。“通过模仿 Alexandro 妻子的绘画,Elsa 想要取代她的位置,”Blanquet 对 Fastcompany 网站说,“当你考虑到电影中的情节,风格转移是最合乎情理的。”
《Alteration》的执行制片人 Yelena Rachitsky 在 Oculus 工作。她解释说,在展示风格转移上,VR 是一个很好的媒介,因为 VR 没有现实世界的各种限制。“如果这是一部传统电影,效果就会不一样了,因为你无法沉浸其中。在 VR 中,一切都在变化,但它又能牢牢抓住你的注意力。它完全改变了你的观影体验。”
在电影开始拍摄之前,FAIR(Facebook 人工智能研究)实验室的人员就开始参与其中。FAIR 的科学家 Antoine Bordes 说,“项目一开始,我们就加入了,向他们展示了人工智能的潜力所在。” 他还提到了研究人员面临的一项挑战。FAIR 开发的风格转移算法适用于移动设备和 4K 视频,但研究人员不知道它能否用于 VR 电影。不过,对未知的探索正是乐趣所在。
“如果一开始就有成功的把握,我们或许就不会参与了,”Bordes 说,“通常,在挑选这些项目时,我们考虑的是,能够从中学到什么东西。” 从这个项目中,Facebook 的研究人员想要了解的是,风格转移是否适用于 VR 项目。
为取得预想效果,FAIR 团队重新训练了他们的神经网络,以适应专业级 VR 视频的要求,比如 4K 分辨率和 360 度视频。同时,为达到 VR 视频的沉浸感,神经网络必须要处理更大尺寸的图片。在这项工作上,计算机花费的时间合计 12 万小时。“对于电影制作团队来说,这是一个很大的赌注,”Cayrol 说,“因为这是一个全新的过程。我们把文件发给 FAIR 实验室,然后他们开始处理。随后,他们把样本发给我们。每次,我们都感觉是打开了圣诞节礼物。”
题图来着 arte