Adobe的Project Sharp Shot使用人工智能一键消除视频模糊

2020-10-21 21:16:07

该项目背后的Adobe工程师舒比·古普塔(Shubhi Gupta)告诉我,这里的想法是通过一次点击对视频进行去模糊-无论它是因为摄像头摇晃还是快速移动而变得模糊。在她向我展示的演示中,效果有时相对微妙,比如她演奏四弦琴的视频,或者相当戏剧性的效果,比如下面一辆快速行驶的摩托车的例子。

有了Project Sharp Shots,就不需要像我们过去用传统方法那样进行参数调整和调整了,“她告诉我。“这只是一次点击即可完成的事情。这不是魔术。这是简单的深度学习和AI在后台工作,提取每一帧,对其进行去模糊处理,并产生高质量的去模糊照片和视频。“。

图像字幕:Adobe Gupta告诉我,该团队查看了现有的图像去模糊研究,然后针对移动图像优化了该过程-然后优化了该过程以降低内存使用量和速度。

值得注意的是,After Effects已经提供了一些消除模糊和消除相机抖动的功能,但这是一个非常不同的算法,有自己的一组限制。

当算法可以访问前后的多个相关帧时,这个新系统工作得最好,但它只需要视频中的几个帧就可以完成任务。