英伟达有新技术,普通视频转成慢动作视频也能顺滑如丝
总有那么多美好的瞬间,想要用慢动作视频记录下来,再慢慢回放欣赏。但手机所拍摄的慢动作视频,总是让我们不太满意。这回英伟达的人工智能可以帮我们解决这个遗憾。
6 月 18 日,英伟达发布了一个视频,显示他们正在搭建的一个人工智能可以将普通的视频转化为平滑自然的慢动作视频。
▲ 来自腾讯视频
在转换一段汽车漂移的视频时,我们可以明显看到,使用 30fps 拍摄的视频,再使用 12.5% 的速度进行慢放时,有明显的卡顿。而下方经过转换后的视频,使用 240fps 的效果进行播放,汽车的漂移过程真的是「顺滑如丝」。
另一个女舞蹈演员跳舞的视频,我们也可以看到,转换后的慢动作视频,人物旋转时头发以及衣裙的细节,也更加清晰。
这段视频还有两个场景,是将 YouTube 著名慢动作博主「The Slow Mo Guys」的一系列视频进行转换,并且进行对比。一个场景是人往下跳,压破气球,一个用网球拍去拍击有颜色的墨水。
从这段视频看来,人工智能对视频中物体的定位,以及补帧的技能都相当了得。英伟达还表示,该项技术可以对各种规格的慢动作视频进行优化。
这个人工智能框架,主要由 NVIDIA Tesla V100 GPU 以及 cuDNN 加速的 PyTorch 深度学习框架组成。通过使用 1.1 万段 240fps 的视频对其进行训练,其中包括日常视频以及体育活动视频。
不得不说,黄教主领导下的英伟达,所研发的人工智能,在图像识别方面,一直在业界领先。
今年 1 月,英伟达就曾推出新的训练方式,让人工智能可以从已有的图像中,生成新的图像,甚至可以利用不同的人像,生成新的肖像。而这些图像依然是稳定、高质量的。
除了这种无中生有生成人像的技术,英伟达的人工智能还能够在视频中「偷天换日」,将天气进行修改,而视频中的树木、路灯等其他的物体,却并无较大变化。
去年年底,英伟达就向外界展示过他们的人工智能特技。他们可以将视频里的白天变成黑夜,下雪的天气变成晴天,还能修改动物的斑纹,将美洲豹变成非洲狮。
而这次英伟达向外展示的新能力,如果真的可以在消费级投入使用的话,对于影视行业的朋友而言,视频的后期做起来就会更加省事了。