英伟达AI新玩法:将30fps慢动作视频变成240fps
- 来源:网络
- 作者:Deego
- 编辑:Deego
英伟达尝试使用AI技术将低帧数的视频变成每秒240帧慢动作视频,预计将会在存储容量有限的手机中应用这样的技术。
创建流畅的慢动作视频需要短时间捕捉多帧画面,如果录的帧数不够,那么最终的慢动作视频看起来会很不流畅,大多数人并没有昂贵的高速相机,不过英伟达试图用AI技术来解决这个问题。
芯片设计商英伟达的新研究通过深度学习将每秒30帧的视频变成每秒240帧慢动作。AI系统会查看两个不同的帧,然后通过跟踪从一帧到下一帧的对象移动来填充中间帧,并且能够产生非常准确(不完美)的结果。
“虽然现在已经可以用手机拍摄每秒240帧的视频,但以高帧率记录所有内容是不切实际的,因为它需要大容量的存储器,而且对于移动设备而言功耗很大,”研究人员在一篇论文中写道,“出于这些原因和其他原因,从现有视频中生成高质量的慢动作视频非常令人感兴趣。”
但这种技术也有限制。首先,研究人员必须训练他们的深度学习系统来处理特定类型的素材。因此,为了获得汽车在水中滑行的慢速视频,他们必须首先用相似的镜头进行训练。另外,这种技术不能产生无限数量的中间帧。没有数据,计算机就不可能预测真实世界物体的运动和行为。但是,英伟达的系统可以产生多达7个中间帧,足以创造不错的慢动作。
预计不久的将来,手机相机中会出现类似的功能。
玩家点评 (0人参与,0条评论)
热门评论
全部评论