cnBeta.COM - 中文业界资讯站 ( ) • 2021-06-17 20:40
我们都曾在某个时候看过一张照片,比如海洋、云彩或瀑布,在短时间内,我们会感觉到照片在动。通常情况下,这种感知的运动只是我们头脑中的一个错觉。而华盛顿大学的研究人员借此开发了一种新的深度学习方法,可以将照片的某些部分做成动画。

华盛顿大学的深度学习方法可以将可流动的材料变成动画,如瀑布、烟雾或云彩。该大学开发的技术只需要一张瀑布的照片就能制作动画。只要无缝循环播放这种短视频,就可以给人以水不断运动的印象。

这几乎就像能够把任何照片变成类似于苹果公司的实时照片,在静止的图像之前捕捉一秒钟左右的运动。该项目的研究人员说,他们的方法的独特之处在于,它不需要任何用户输入或额外的信息。这个过程只需要一张图片,并产生一个高分辨率、无缝循环的视频,通常看起来像一个真实的视频。

开发该技术是一个挑战。据研究人员称,这实际上要求他们预测未来。该系统包含两部分,第一部分预测拍摄照片时事物的运动情况。该信息被提取并用于创建动画。

估算运动需要研究人员用成千上万的瀑布、河流、海洋和其他具有流动运动的材料的视频来训练一个神经网络。训练过程要求神经网络在只给出第一帧时猜测视频的运动。神经网络将其预测与实际视频进行比较,并学会识别线索,如溪流中的涟漪,以帮助预测接下来会发生什么。研究人员创造了一种他们称之为 "对称溅射"的概念,预测了一幅图像的未来和过去,将它们结合成一段单一的动画。