Adobe实习生的智能景深算法:2D图片3秒变立体,变换视角流畅自然(2)
重复这一过程,直到点云充分扩展,填补空隙,可以实时地呈现完整且连续的画面。 “用过都说好” 研究人员觉得好,那不算好。新方法效果如何,还是用户说了算。 于是,研究团队搞出了一个“非正式用户调研”。他们在YouTube上搜集了30个人类创造的3D Ken Burns视频,将其分成“风景”,“肖像”,“室内”,“人造室外环境”四组,每组随机抽取三个视频作为样本。 8位志愿者参与到了这个测试之中。团队为每个志愿者分配了一张静态图,并提供了人类作品作为参考,要求志愿者使用新方法和Adobe After Effects模板、移动App Viewmee这两种Ken Burns制作工具创作类似的效果。 志愿者会依据自己的主观意见评价每种工具的可用性和质量。 在志愿者们看来,不论是从效果上,还是易用性上,Adobe的这个新工具显然好得多。 来自Adobe的实习生(现已转Google) 这项研究的第一作者,是一名波特兰州立大学的博士生,名为Simon Niklaus,研究方向为计算机视觉与深度学习。 他在Adobe Research实习的时候完成了这项工作,目前他正在Google实习。 他的博士生导师,名为Feng Liu,博士毕业于威斯康辛大学麦迪逊分校,现在是波特兰州立大学的助理教授,也是这一研究的做作者之一。 此外,这项研究还有另外两名作者,分别是Long Mai和Jimei Yang,都是Adobe的研究科学家。 Simon Niklaus在Hacker News上与网友互动时也谈到了研究的开源计划。 他说,自己计划公布代码以及数据集,但还没有得到批准。因为这项工作是“实习生”完成的, Adobe在开源方面都比较大度。 当然,这也无法排除他们商业化的可能性,如果你对这一研究感兴趣,可以先看下研究论文: 3D Ken Burns Effect from a Single Image https://arxiv.org/abs/1909.05483 One more thing…… 关于Ken Burns Effect,也有一段乔布斯的往事。 为了将这一特效用到苹果中,乔布斯还专程联系了Ken Burns,希望能够得到他的许可。 一开始,Burns是拒绝的,他不想自己的名字被商业化。 但后来,Burns透露,他同意了乔布斯的请求。 这中间到底发生了什么,也没有太多信息传递出来。 现在,这一效应在iPhone中应用非常广泛,比如照片的“回忆”功能,就能够自动利用这一特效,把一张张照片制作成视频。 这也给Burns带来了很多“麻烦”。 他说,有时候自己走在街上,会有陌生人冲到他面前,说自己如何在iPhone上使用它,或者是问他问题。 对于这种情况,他说自己都是尽力快速逃离现场。跟明星遇上私生饭差不多。 emmm……
(编辑:ASP站长网) |