作者|廖银雪
编辑|傅博
看到这个消息,我的心都崩溃了:AI可以剪视频。这意味着,也许包括我们这些新闻视频工作者在内的一小部分电影从业者在未来可能会更难找到工作。 (捂脸痛哭)
正如李开复最近在哥伦比亚大学的毕业典礼演讲中所说,未来十年可能真的是人工智能时代。
然而,在很多人都在为 AI 将取代大部分简单重复的工作而焦虑的同时,仍有一群人在暗自感叹,比如艺术从业者,因为当时我们并没有认为人工智能可以在短期内胜任创意和艺术工作。
……直到我们看到了这项斯坦福-Adobe 研究。
这种新算法可以根据导演的要求对原始视频素材进行剪辑,无论是像papi酱这样的细粒度视频,还是经典电影风格的视频,都可以在极短的时间内完成。在里面完成工作。
首先,我们想简单解释一下视频剪辑老师的工作流程。比如我们想做一部有剧情的微电影。首先,我们会按照写好的剧本进行拍摄。一般来说,同一个场景和镜头必须从不同的角度、不同的摄影机位进行多次拍摄最新电影剪辑,才能得到不同的角度和不同的场景。其他视频资料。
剪辑后期可以将同一场景的多个片段拼凑在一起剪辑,这样就可以用镜头的语言表达不同的情绪,传达多种信息,也避免了观众对重复单调的镜头感到厌烦。
但是,一般来说,这项工作是琐碎的,技术含量相对较低。而且这个算法可以为剪辑老师节省大量时间,避免繁琐枯燥的工作。
首先,本系统可以将同一场景的不同镜头有序排列,并与剧本对齐,即人物的对话与剧本中的台词一一对应。
它还可以通过语音、面部和情感识别对镜头类型、演员的情绪强度、画面的构成等进行编码。由于导演最多可以为一个场景拍摄 10 个镜头,因此仅脚本功能可以节省数小时。
然而,这个系统的“本质”是按照电影镜头语言规则进行的“惯用”剪辑。
例如,许多故事都以广角“布景”镜头开始,以便观众对故事发生的地点有一个基本的了解。在某些情况下,导演还会使用慢放或快进来强调角色、强化情绪或保持镜头类型(如广角或特写)的一致。
《摔跤吧,爸爸》中人物特写镜头
根据导演风格或故事本身的不同,导演使用这些镜头语言来达到最佳的叙事效果。而且这个系统操作起来非常简单。
研究人员对镜头语言预设了很多设置,剪辑师只需将自己想要的镜头语言输入系统,系统就会自动将脚本与场景匹配。
在斯坦福研究团队制作的教学视频中,他们举了一个具体的例子。例如,如果他们想制作传统电影风格的视频(在对话两侧切换,叙事节奏不慢等),剪辑师会选择“从广角镜头开始”的镜头语言建立故事发生的场景,然后选择经典电影风格“避免跳跃剪辑”,选择“强调角色”这样的电影语言。
系统在几秒钟内迅速制作了一个非常喜剧风格、严格脚本的剪辑。看完后我的下巴都掉下来了——它几乎就像一个人类剪辑!
然后,测试人员使用相同的剧本和拍摄素材,选择了“跳跃剪辑”等典型网红视频的镜头语言,几秒钟后又出现了另一种风格的视频。时钟做好了。
整个过程最让人瞠目结舌的是,这个算法可以根据具体要求在2-3秒内生成一个71秒的视频,几秒内又可以生成另一个完全不同的风格。视频。
研究团队残酷地聘请了一位拥有 25 年编辑经验的 剪辑 老师来做同样的工作,他盯着电脑屏幕一动不动。从浏览所有视频资料到手动完成需要三个小时剪辑——而且只有剪辑一种风格的视频出来了。
他估计要再花一个半小时来制作一个风格完全不同的视频。
更重要的是,它可以减少大量重复性工作,让剪辑师在短时间内看到基于不同风格的视频样本。这将使他们有更多的时间来微调和发展他们在其他领域的技能和艺术才能。
但目前系统只用于对话视频剪辑,毕竟人脸和语言更容易识别。而且演员说话时也无法自然切入对方演员的画面来表现其他角色的反应。
此外,它不能判断表演的质量和拍摄的质量。有时不同场景的拍摄素材(包括观众喜欢的服装)存在不一致,目前的系统无法识别这些错误,剪辑师、制片人和导演仍需要亲自检查所有拍摄的视频。
未来研究人员会尝试扩展其使用场景,比如剪辑动作片,这就需要研究人员为动作片输入更多的镜头语言设置,
当然,从目前来看,这个AI只有做剪辑助手的资格,短时间内不会完全取代视频剪辑师。那么看完这篇文章,如何提升自己而不被AI替代呢?
我们认为,保持你的创造力和独特性,努力打破常规,深刻体会人性和美最新电影剪辑,可能是我们战胜机器的重要砝码。