人工智能和云如何消除制作电影和电视的边界

如果这些天关于人工智能和云计算的对话似乎无处不在，而不仅仅是在稀有的技术和投资者圈子里，那是真的。 在娱乐行业中，这一点更是如此，创意阶层和商业阶层都关心他们多年磨练的技艺可能产生的影响，并对技术的民主化力量感到兴奋。

在最近的圣丹斯电影节上，我与众多导演、剪辑师和其他使用新的人工智能和云到摄像机功能改变电影和电视制作过程的人以及 Adob​​e 的高管进行了交谈，Adobe 使广泛使用的编辑软件 Premiere Pro 和其他激发创造力的工具。

这是一个非凡的时代，发展迅速，有令人窒息的正面和负面预测，但也有一些很好的机会来重塑一个多世纪以来电影和电视（我们就称它们为基于视频）的制作方式。

行业的拥抱才刚刚开始。 康卡斯特CMCSA
，例如，刚收到 因使用 AI 快速生成体育视频集锦而获得技术艾美奖.

明星和他们的代表也注意到了，因为人工智能技术甚至出现在该行业的专业角落。

比如人才中介 CAA与玄学签署战略合作伙伴关系， 它正在提供“去衰老”工具 在这里， 基于图画小说的 Miramax 功能. 明星汤姆汉克斯和罗宾赖特将在一个房间里扮演角色，随着年龄的增长，从他们很久以前的青年时代开始。

对于一个机构来说，这种技术的吸引力是显而易见的：他们最大的明星/客户突然可以担任更多角色，并持续数十年。

新技术的支撑可能性

但日复一日，编辑、导演和其他参与创建基于视频的项目的复杂任务的可能性正在增加。 在与他们的独立和纪录片项目填满圣丹斯日程的崭露头角的导演交谈时，很明显他们将 Premiere Pro 视为一个高速协作平台，可以为越来越多的可能创作者提供越来越广泛的创意用途。

Adobe的ADBE
专业视频的产品营销总监 Meagan Keane 称 AI 是“当我们想到电影制作的未来时，它为可能性打开了巨大的大门。 我们认为未来属于每个人。”

她的意思是，人工智能如何增强人类的创造力，而不是像某些人担心的那样取代它。 以人工智能为动力的工具可以赋予创作者以适度或没有技术技能、资源或与视频和其他媒体中引人注目的时尚项目的联系。 即使是现在，对于专业创作者来说，AI 也减少了重复性任务的负担，例如浏览特定场景的镜头，让编辑和其他创作者能够专注于（字面意义上的）更大的画面。

Adobe 全球创新高级总监迈克尔·乔尼 (Michael Cioni) 以及 Adob​​e 拥有的 Frame.io 的相机到云技术的长期拥护者表示，但它远不止于此。

每个数字资产也是云资产

他简单地说：“到 2031 年，媒体和娱乐中产生的每一种电子资产都将在云端生成，由云端生成。 这是事实。 我称之为技术确定性，即设备生成的每一项电子资产都将在云中生成”，而不是在本地硬盘、赛璐珞、录像带或存储卡上生成。

在熟悉的媒体转型周期中，文本文档率先转向云端（和人工智能）。 现在它们经常在基于云的服务上创建、共享和重塑，例如 Google Docs、Apple Pages、Microsoft Word 和 Adob​​e 的 Acrobat。 得益于 Spotify、Apple Music、Amazon Music、Tidal 等，数以亿计的人在云端收听（并创作、协作和销售）音乐。 现在，它正在改变我们创造的最复杂的媒体。

“假设你正在拍摄电影场景，”Cioni 说。 “在拍摄一个场景后，你实际上可以输入语言：'下雨。' 镜头中会出现水，会开始下雨。 “让它下雪”，它就会开始出现在镜头中。 你不需要成为一名工程师就可以做到这一点。 这看起来真的像科幻小说，但它会变得完全可行。 我们看到它发生在静止（照片）的早期阶段，我们知道它会级联到视频中。 这是我们必须考虑的一个非常重要的属性，它会如何影响有创造力的人。”

这对制作移动图像的未来有很多影响。 正如伦纳德·科恩 (Leonard Cohen) 很久以前所说的那样，当他在 30 多岁时从诗人转变为小说家和歌手/词曲作者时，“许多努力之间的界限已经消失。”

许多年轻的电影制作人经常跨越这些边界，在制作项目时什么都做一点，并经常在数字平台上进行合作。 通过云到摄像机的交付和人工智能智能，他们可以拍摄一个场景，快速生成一个粗略的“组合”作为编辑的起点，同时确定是否有足够的场景让场景“工作”，或者是否需要更多的拍摄.

他们还可以对基本的视觉效果、色彩校正甚至声音设计进行粗略处理，然后再交给专家进行微调。 因此，对于许多 Sundance 创作者而言，Premiere 已不仅仅是传统的非线性视频编辑程序。

建立人与图像之间的新关系

“这是我们最大的热情之一：人与相机之间的关系，以及它如何影响社会，”这部挑衅性纪录片的联合导演（兼联合编辑）Maximilien Van Aertryck 说道。 神奇的机器，这 凭借创意视觉获得圣丹斯评审团特别奖. “我们就像喜欢玩乐的人类学家。”

他们的纪录片温和地呼吁对我们使用这些新工具创造的世界采取深思熟虑的方法。 正如古老的政治笑话所说，“你会相信谁：我还是你撒谎的眼睛？” 我们越来越需要了解当我们的眼睛 ，那恭喜你， Aertryck 的联合导演/编辑 Axel Danielson 说，撒谎和移动的图像应该被相信。

“这部电影没有太多答案，”丹尼尔森说。 “它有问题。 我们知道的唯一答案是我们作为社会集体需要非常认真地对待媒体素养。”

该项目整理了一个多世纪的移动图像，可以追溯到乔治·梅里埃斯（Georges Melies）等先驱（他的王室主题会惊呼这部电影的名字）。 一路上，它停在狂热得令人不安的莱妮·里芬斯塔尔 (Leni Riefenstahl) 身上，逐个播放她在纽伦堡举行的纳粹集会上最喜欢的镜头，以及一名 ISIS 战士在恐怖分子招募视频的吸血鬼卷轴中反复搞砸他的台词。 它也具有更温和的功能，但关键是，伟大的和糟糕的创作者将以多种方式利用新工具。

On 神奇的机器， Van Aertryck 和 Danielson 花了数年时间收集关于人/相机与他们创造的图像之间复杂关系的独特片段。 一旦到了组装电影的时间，他们就与编辑 Mikel Cee Karlsson 和执行制片人 Ruben Ostlund 远程合作，Ruben Ostlund 是两次获得奥斯卡提名的编剧兼导演（悲伤三角) 其 Plattform Produktion 制作了这部电影。

“我们不是训练有素的编辑； 我们这样做是因为我们必须这样做，”Van Aertryck 说。 “Adobe 成为我们的完美工具，因为我们可以将所有内容都放入其中并来回共享。”

Van Aertryck 说，尽管他们分布在从波罗的海（瑞典哥德堡）到巴利阿里群岛（马略卡岛）的整个西欧，但他们四人使用 Premiere 基于云的工具来交换剪辑和序列，就像他们围坐在一张桌子旁一样。 这是一个特别广泛的例子，它让创作者可以自由地来自任何地方，并且可以在任何地方工作，如果他们需要或想要的话。

“能够在线共享让更多的可能性成为可能，”说 Crystal Kayiza，编剧兼导演 休息站, 它获得了美国短片小说圣丹斯评审团奖。 “如果我想回到俄克拉荷马州，只要我参与（创作）短片，我就可以做到。”

去年，Adobe 在一些流行的相机和其他生产设备中宣布了新的直接到云的功能，可以在捕获视频的同时传输视频。 这让剪辑师、制片人、高管和其他后期制作专家可以在镜头拍摄后几分钟内开始处理镜头。

即使是小型制作也在使用这些技术。 云连接是必不可少的，尤其是在早期， 在 Mariachi 参加校队，获得圣丹斯剪辑奖的丹妮拉·基罗斯 (Daniela T. Quiroz) 说。

导演亚历杭德拉·瓦斯奎兹 (Alejandra Vasquez) 和萨姆·奥斯本 (Sam Osborn) 还在布鲁克林的基罗斯 (Quiroz) 开始拼凑该项目时，仍在拍摄有关得克萨斯州里奥格兰德河谷高中舞蹈比赛的纪录片。 她对已拍摄素材的早期和新鲜观点帮助塑造了后续的拍摄和重点领域。

“作为编辑，我们有幸第一次在镜头前看到这些人，”Quiroz 说。 “你真的会看到你爱上了谁，爱上了什么音乐。”

没有那些立即可用的数字日报，就像几年前的“过去”一样，是拍摄的必要条件 有时我想死 位于俄勒冈州海岸的偏远地区。 相反，每天的镜头都被加载到硬盘上，然后连夜运送到新奥尔良，供数字中介接收。 编辑瑞安·肯德里克 (Ryan Kendrick) 说，这是对技术带来的改进的提醒。

一种新的合作方式

这让总部位于纳什维尔的肯德里克开始剪辑，与导演雷切尔兰伯特和其他多个州的其他人合作。

“我可以和我想一起工作的人一起工作，而且我们不在同一个地方工作，这真是太酷了，”肯德里克说。 它还改变了导演、电影摄影师、剪辑师和其他制作人员之间的动态。

肯德里克说，过去“你总是觉得自己与片场隔绝”。 “现在，你感觉与它的联系更紧密了。 您不会觉得与他们发出的音调如此分离。 剪辑室是一个非常棒的地方，会犯很多错误，并且做与你想做的事情完全相反的事情。 我总是说，‘我不知道。 让我们弄清楚。'”

On 有时我想死， Kendrick、Lambert 和摄影指导 Dustin Lane 在真正开始拍摄之前很久就开始每周进行一次谈话，以尽早避免潜在的问题。

“我们会讨论可能出现的编辑问题，”肯德里克说。 “当你拿到剧本时，最难考虑的是电影将如何过渡到下一部分。 具体来说，在电影中，（主角）去看电影。 我们谈了很多关于如何获得保持情感分量所需的图像。”

Kendrick 说，Camera-to-Cloud 的快速周转对于商业广告和音乐视频等短期项目特别有用。

“商业广告中的一些转变非常疯狂，”肯德里克说。 能够在 Premiere Pro、Frame.io 和 After Effects 中来回传递项目真的只能通过基于云的架构来实现。

“这是过去五年中消除的最大（生产工作流程延迟），”Kendrick 说。

构建更好技术的指导原则

Adobe 的技术方法是围绕五个“指导原则”构建的：工作流、媒体、协作、生产力和安全性，Keane 说。

“我们真的将 AI 投入到‘生产力’中，”基恩说。 “这与更换创意无关。 这是关于取代平凡的。”

好莱坞的工会正在密切关注快速变化的人工智能领域。 Puck 报道称，好莱坞最大工会 SAG-AFTRA 的董事会计划在即将进行的合同谈判中纳入肖像权问题——使用 AI 重现其成员的外貌、声音或其他方面。

目前，人才律师已被告知，“合同中任何旨在控制模拟演员表演权利的语言，（是）'在与工会协商条款之前无效且不可执行，'”Puck 报道.

这个复杂的新问题可能会在今年春天进行一些繁重的合同谈判。 希望延长职业机会的年轻和中年表演者可能会接受该技术的某些用途，但如果没有强有力的合同保护，一些媒体可能会使用该技术来避免为技术上不是演员的数字表演付费。

可以在 Twitch 上找到数周的最终结果的粗略示例，其中“watchmeforever”创建了一个 无尽的，人工智能生成的“情节” 宋飞. 这个“节目”的特点是变形不佳、计算机生成的声音、简单的图形和不是特别好笑的笑话。 该节目还提出了更高质量水平的最终可能。 值得注意的是，当“Jerry”角色的站立例程转向被认为是反跨例程的例程时，无限循环被关闭通知打断了。

为创造性的追求打开世界

从更积极的角度来看，Adobe 的 Keane 指出人工智能和云将提供更广泛的创意工具。 它消除了大型渲染农场生成处理图像和声音、生成效果等的需要，同时仍提供任何雄心勃勃的视频项目所需的计算能力和安全性。

基恩说：“如果你能集中云，你就可以打开来自世界各地的故事的可能性。” “每个阶段都需要协作。 共同的观点要么强化你的想法，要么进一步挑战你。”

Keane 举例说明安全对电影制作人的重要性 计划C.，一部关于堕胎的圣丹斯纪录片。 它的创作者需要对一些镜头采访的面孔和声音进行多次模糊处理，还需要对未模糊处理的原始媒体进行严格的安全保护。

基恩说，生成式人工智能、深度造假和相关问题的激增也意味着真实性比以往任何时候都更加重要。 Adobe 是 Content Authenticity Initiative 的成员，与纽约时报等其他媒体和科技公司一样纽约时报
和佳能。

基努里维斯，标志性科幻系列的明星 矩阵，不太乐观。 他最近告诉《连线》杂志，有人恶意使用 AI 辅助视频，创建 deepfakes，是“可怕的”。 里维斯的合同通常包括一个条款，禁止工作室以数字方式操纵他的表演，该条款可以追溯到几十年前的一个制作中，在他的脸上插入了一个虚拟的眼泪。

“令人沮丧的是你失去了你的代理权，”里夫斯谈到侵入性做法时说。 “当你在电影中表演时，你知道你会被剪辑，但你正在参与其中。 如果你进入 deepfake 领域，它没有你的观点。 太可怕了。 看看人类如何处理这些技术将会很有趣。”

下一个改变游戏规则的技术

下一个边缘推动技术，已经在 Premiere Pro 的测试版中可用，是所谓的基于文本的编辑，它允许一个人通过编辑 AI 从视频中提取和转录的对话文本来编辑视频。 人工智能还突出显示重要的声音片段，可以构建最终项目的初始组合，并生成基于关键字的搜索以快速找到特定的剪辑或对话。 为项目构建的数据成为有效管理所有素材的强大新方法。

“你正在用所有这些丰富的数据来滋润媒体，”基恩说。

一些较小的公司已经推出了类似技术。 描述和 播客 可以创建你的声音的数字版本，然后让它阅读基于文本的脚本，而不需要更多的编辑。 Descript 最近还为视频添加了基于文本的编辑，无论是播客还是其他内容。

剪辑师肯德里克说，他已经使用 Adob​​e 的基于文本的编辑工具帮助一位朋友快速编辑一部以阿拉斯加为背景的迷你纪录片。 肯德里克说，基于文本的剪辑也可能对所谓的“剪辑师”非常有用，制作人/剪辑师通常必须费力地浏览数天的镜头，才能在紧迫的时间内快速组装无剧本的节目。

有声读物、剧本、社交媒体也获得人工智能

人工智能也正在进入许多其他娱乐领域。 苹果AAPL
推出 一套人工智能工具，旨在为有声读物创建旁白，为作者创造了另一种选择，可以为他们的项目创建低成本的音频版本，“由基于人类叙述者的数字语音进行叙述”。 这一消息引起了人类有声读物叙述者精英团队及其广大粉丝的强烈反对。

珍视这些人类叙述者的最佳作品当然是有原因的，而且可能还需要很长时间，人工智能工具才能接近最佳人类读者在最佳书籍中的引人入胜的声音和表演。

但使用这种人才的成本远远超出了每年出版数万本书的财务成本。 这就是 Apple 的工具套件可以为那些试图进入一个以前在全球范围内价值估计为 1.5 亿美元的偏远市场的小型书籍、作者和出版商提供进入另一个市场的途径。

创业公司 电影行业 使用 AI 分解脚本组件，包括演员、道具、服装、使用的车辆、声音、位置等元素。

在业务的短视频方面，TikTok、Meta 的 Reels 和 Alphabet 的 YouTube Shorts 都依赖于机器学习和人工智能工具来提供他们认为你会想要观看的下一个“推荐”视频，并且以更加无缝和引人入胜的方式将广告与这种体验联系起来。

LightShed Partners 的分析师 Rich Greenberg 称 Facebook 转向改进人工智能驱动的内容推荐极其昂贵，但“最终它可以证明（Meta CEO 马克）扎克伯格在一个自成立以来不断发展的平台上的第二个最令人印象深刻的支点（仅次于移动）。”