人工智能可能有助于编辑下一代大片

导读 he Verge的旗舰播客The Vergecast将展示一个迷你剧,致力于在经常被忽视的行业中使用人工智能,由Verge高级记者 Ashley Carman主持。该

he Verge的旗舰播客The Vergecast将展示一个迷你剧,致力于在经常被忽视的行业中使用人工智能,由Verge高级记者 Ashley Carman主持。该系列的重点是视频世界的人工智能。

更具体地说,我们正在研究如何将人工智能用作帮助人们简化视频内容创建过程的工具。是的,这可能意味着软件在人类的创造力活动中扮演着更重要的角色,但是如果不是取代我们,而是可以使用机器学习工具来帮助我们的工作呢?

这就是 Adob​​e Sensei(Adobe 的机器学习平台)副总裁 Scott Prevost 对 Adob​​e 人工智能产品的设想。“Sensei 建立在我们坚信人工智能将使人类创造力民主化和放大,但不会取代它的信念之上,”普雷沃斯特说。“最终,让创作者能够做他们以前可能做不到的事情。还要自动化和加速一些属于创造力的平凡和重复性任务。”

Adobe 已经将 Sensei 的计划融入其当前产品中。去年秋天,该公司发布了一项名为Photoshop 神经过滤器的功能,该功能可用于去除压缩图像中的伪影、改变照片中的光线,甚至改变拍摄对象的面部,让他们微笑而不是皱眉,例如,或调整他们的“面部年龄”。从用户的角度来看,这一切都是通过移动几个滑块来完成的。

Adobe 还具有Content Aware Fill等功能,该功能内置于其视频编辑软件 After Effects 中,可以无缝地从视频中删除对象——手动完成这项任务需要数小时甚至数天。Prevost 分享了一个故事,讲述了一小群纪录片制片人在发现镜头脏污导致视觉效果上出现不需要的斑点时遇到了镜头问题。借助 Content Aware Fill,该团队仅在单个帧中识别了对象,就能够从视频中去除不需要的瑕疵。如果没有 Adob​​e 之类的软件,该团队将不得不单独编辑数千帧或完全重新拍摄素材。

Adobe 的另一项名为Auto Reframe 的功能使用 AI 为不同的纵横比重新格式化和重新构建视频,将可能已使用常规静态裁剪剪掉的重要对象保留在帧中。

该领域的技术显然在为消费者以及大预算的专业人士而进步。虽然像deepfakes这样的AI 视频编辑技术还没有真正登上大银幕——大多数工作室仍然依赖传统的CGI——但导演和好莱坞工作室正在使用 AI 的地方是配音。

一家名为Flawless的公司专门从事人工智能驱动的 VFX 和电影制作工具,目前正在开发一种他们称之为 TrueSync 的东西,它使用机器学习为多种语言的演员创建逼真的、口型同步的可视化。Flawless Scott Mann 的联合首席执行官兼联合创始人告诉The Verge,这种技术在重建演员的嘴部动作方面比传统的 CGI 效果更好。

“你正在训练一个网络来理解一个人是如何说话的,所以构成我们语言的不同视位和音位的嘴巴动作是非常具体的,”Mann 说。“这就是为什么在这个过程中需要如此详细的细节才能真正获得像那个人说话那样真实的东西。”

Flawless 分享的一个真正引人注目的例子是电影阿甘正传中的一个场景,汤姆汉克斯的角色说日语。角色的情感仍然存在,最终结果肯定比传统的配音更可信,因为嘴巴的动作与新对话同步。有些地方你几乎忘记了它是幕后的另一个配音演员。

如果有人自己创建、编辑和发布项目,那么 Adob​​e 的 AI 工具应该可以为他们节省大量时间。但在较大的制作公司中,每个角色都被委派给特定的专家——修图师、调色师、编辑、社交媒体经理——这些团队最终可能会缩小规模。

Adobe 的 Prevost 认为,这项技术更有可能改变工作,而不是完全摧毁它们。“我们认为创意人员过去在制作中所做的一些工作,他们不会再做那么多了,”他说。“他们可能会变得更像艺术总监。我们认为它实际上让人类能够更多地关注他们工作的创造性方面,并探索这个更广泛的创造性空间,在那里 Sensei 做一些更平凡的工作。”

视频团队最终会裁员吗?

Flawless 的 Scott Mann 也有类似的看法。他认为,虽然该公司的技术可能会减少对翻译电影的剧本重写的需求,但它可能会为新的工作机会打开大门。“我会说,老实说,这个角色有点像导演。你正在做的是你试图传达这种表现。但我认为通过技术和这个过程,这将是一个站在行业的那一边并发展这个行业的案例。”

剧本监督员最终会成为导演吗?或者照片修图师最终成为艺术总监?也许。但是我们今天可以肯定的是,许多这些工具已经结合了来自创作过程各个点的工作流程。音频混合、着色和图形都成为多功能软件的一部分。所以,如果你在视觉媒体领域工作,而不是专注于特定的创意人才,你的创意工作可能会要求你在未来成为更多的通才。

“我认为图像、视频、音频、3D 和增强现实之间的界限将开始变得模糊,”普雷沃斯特说。“过去有专门研究图像的人,也有专门研究视频的人,现在你看到人们在所有这些媒体上工作。因此,我们认为 Sensei 将在基本上帮助以有意义的方式将这些事物联系在一起方面发挥重要作用。”