加入收藏 | 设为首页 | 会员中心 | 我要投稿 核心网 (https://www.hxwgxz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 建站 > 正文

Adobe实习生的智能景深算法:2D图片3秒变立体,变换视角流畅自然

发布时间:2019-09-16 22:15:38 所属栏目:建站 来源:鱼羊 栗子 乾明
导读:本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。 你离礁石越来越近,仿佛还有一秒就要触礁了。 不过这张动图,并不是从人类拍摄的视频里截下来的。 是Adobe放出的新魔法,把这张静态照片变出了立体感,整个过程只需要2-3秒: 这种特效

重复这一过程,直到点云充分扩展,填补空隙,可以实时地呈现完整且连续的画面。

2D图片3秒变立体,变换视角流畅自然:Adobe实习生成果登顶级期刊

“用过都说好”

研究人员觉得好,那不算好。新方法效果如何,还是用户说了算。

于是,研究团队搞出了一个“非正式用户调研”。他们在YouTube上搜集了30个人类创造的3D Ken Burns视频,将其分成“风景”,“肖像”,“室内”,“人造室外环境”四组,每组随机抽取三个视频作为样本。

8位志愿者参与到了这个测试之中。团队为每个志愿者分配了一张静态图,并提供了人类作品作为参考,要求志愿者使用新方法和Adobe After Effects模板、移动App Viewmee这两种Ken Burns制作工具创作类似的效果。

志愿者会依据自己的主观意见评价每种工具的可用性和质量。

2D图片3秒变立体,变换视角流畅自然:Adobe实习生成果登顶级期刊

在志愿者们看来,不论是从效果上,还是易用性上,Adobe的这个新工具显然好得多。

来自Adobe的实习生(现已转Google)

这项研究的第一作者,是一名波特兰州立大学的博士生,名为Simon Niklaus,研究方向为计算机视觉与深度学习。

他在Adobe Research实习的时候完成了这项工作,目前他正在Google实习。

2D图片3秒变立体,变换视角流畅自然:Adobe实习生成果登顶级期刊

他的博士生导师,名为Feng Liu,博士毕业于威斯康辛大学麦迪逊分校,现在是波特兰州立大学的助理教授,也是这一研究的做作者之一。

此外,这项研究还有另外两名作者,分别是Long Mai和Jimei Yang,都是Adobe的研究科学家。

2D图片3秒变立体,变换视角流畅自然:Adobe实习生成果登顶级期刊

Simon Niklaus在Hacker News上与网友互动时也谈到了研究的开源计划。

他说,自己计划公布代码以及数据集,但还没有得到批准。因为这项工作是“实习生”完成的, Adobe在开源方面都比较大度。

当然,这也无法排除他们商业化的可能性,如果你对这一研究感兴趣,可以先看下研究论文:

3D Ken Burns Effect from a Single Image

https://arxiv.org/abs/1909.05483

One more thing……

关于Ken Burns Effect,也有一段乔布斯的往事。

为了将这一特效用到苹果中,乔布斯还专程联系了Ken Burns,希望能够得到他的许可。

一开始,Burns是拒绝的,他不想自己的名字被商业化。

但后来,Burns透露,他同意了乔布斯的请求。

2D图片3秒变立体,变换视角流畅自然:Adobe实习生成果登顶级期刊

这中间到底发生了什么,也没有太多信息传递出来。

现在,这一效应在iPhone中应用非常广泛,比如照片的“回忆”功能,就能够自动利用这一特效,把一张张照片制作成视频。

这也给Burns带来了很多“麻烦”。

他说,有时候自己走在街上,会有陌生人冲到他面前,说自己如何在iPhone上使用它,或者是问他问题。

对于这种情况,他说自己都是尽力快速逃离现场。跟明星遇上私生饭差不多。

emmm……

(编辑:核心网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读