一部手机就能搞定影片级动画？Runway推出革命性AI视频生成工具

tayun

划重点：

Runway的Act-One功能为AI视频创作带来了革命性的变化，它允许用户通过简单的输入，快速生成具有丰富表情的角色动画。

Act-One通过降低技术门槛，使得更多创编辑能够探索新的故事叙述形式和艺术表达方式，在独立影片制作和数字媒体领域具有革新意义。

Act-One在面部表情捕捉方面表现出色，能够精准捕捉演员在复杂场景中的情感深度和表演风格。

10月23日消息，自2022年末首批AI视频模型问世以来，AI视频技术在多个方面取得了显著进展，包括提高画面的真实感、分辨率、保真度，以及与用户输入的文本提示或视频描述的匹配度。然而，对于众多AI视频创编辑来说，一个长期存在的难题是如何捕捉面部表情，并在AI生成的角色中逼真再现。通常情况下，AI角色的表情常常难以达到预期的自然度和精确度，限制了创作的自由度。

这一长期困扰AI视频创编辑的挑战终于迎来了解决方案。日前，得到GOOGLE等巨头支撑的纽约AI初创企业Runway，宣布了一项革命性的新功能——“Act-One”。通过这项功能，用户能够使用任何视频摄像头，包括内置于智能手机中的摄像头，来录制自己或演员的面部表情。随后，这些表情将以极高的精确度被映射到AI生成的角色上，实现了前所未有的真实感。这一创新工具的推出，无疑将为AI视频创作领域带来一场革命。

根据Runway在博客上的最新公告，他们将从当日开始逐步推出这款免费的革命性工具。所有Runway用户都可试用Act-One”。但只有积分足够且使用过Gen-3 Alpha模型的用户，才能使用全部的功能。

Gen-3 Alpha模型具备先进的AI视频生成能力，支撑从文字描述、图片或现有视频生成新内容。用户可以提供场景描述、上传静态图像或视频，甚至可以组合这些不同的输入元素。Gen-3 Alpha会综合这些信息，生成符合用户需求的新视频场景。

虽然Act-One功能目前仅对少数用户开放，但AI视频创编辑社区已经开始为这一创新欢呼。用户Allen T.在他的X社交媒体账户上兴奋地评论道：“这简直是游戏规则的改变者！”

Runway最近在好莱坞影片制作领域取得了重大进展，上个月该企业宣布同影片制片企业Lionsgate建立合作关系。这次合作将使双方基于Lionsgate超过2万部影片的庞大影片库，共同开发定制的AI视频生成模型。

01 简化传统上复杂且设备繁多的创作过程

传统上，制作面部动画是一个既复杂又繁琐的过程，涉及到动作捕捉设备、手工面部绑定和多角度的参考影像。影片爱好者在观看特效和动作影片--比如《指环王》系列、《阿凡达》或是《猩球崛起》--的幕后制作时，都能感受到这一过程的复杂和挑战，影片中演员们的头上常常都戴着笨重的设备。

为了精确捕捉丰富的面部表情，大卫·芬奇（David Fincher）导演及其团队在制作《本杰明·巴顿奇事》（The Curious Case of Benjamin Button）时，开发了全新的3D建模技术，这项创新为他们赢得了奥斯卡奖。

近几年，一些App和AI初创企业，比如Move，试图减少进行精确动作捕捉所需的设备。Runway的Act-One让户能够轻松地为各种风格和设计的角色添加动画，无需依赖动作捕捉装备或复杂的角色绑定。用户只需提供一段简单的视频，就能将表演中的各个细节--例如眼神的微妙变化、细腻的面部表情以及节奏的精准把握--转移到一个或多个风格迥异的AI生成角色之上。这一过程极大地简化了动画制作，使得创编辑能够轻松地将现实世界的表演转化为虚拟角色的生动表现。

Runway在社交媒体上表示：“Act-One能够将单一视频源中的表演细节转换成多样化的角色造型和风格迥异的表现形式。”

Runway的这种方法为动画师、游戏开发者和影片制作人带来了显著的优势，它能够精确捕捉演员面部表情，同时适应不同的角色设计和体型比例，为创造具有真实情感和个性的独特角色提供了无限可能。

02 在各种摄像机角度下呈现影片级的真实感

Act-One的优势在于其能够在多变的摄像机角度和不同的焦距下，创造出具有影片质感的真实画面。这一特性让创编辑能更轻松地用角色讲述情感故事。过去，这需要昂贵的设备和复杂的制作。

该工具能够精准捕捉到演员在复杂场景中的情感深度和独特的表演风格，即使是最微妙的神态和动作也不放过。这种技术的进步使得创编辑们能够以创新的方式为角色注入活力，无论是在真人拍摄还是动画制作中，都能够展现出更加丰富多彩的叙事可能。

虽然Runway之前已经支撑了视频到视频的AI转换技术，允许用户上传自己的视频，并通过Gen-3 Alpha或其他早期的Runway AI视频模型如Gen-2，利用AI效果进行角色的“换肤”，但Act-One的新功能在面部映射和效果上做了特别的优化。

03 开启更广阔的视频叙事能力

Act-One以其卓越的功能显著提升了视频叙事的潜力。如今，仅需一台普通的消费级相机，一位演员就能够表演多个不同的角色，而Act-One能够为每个角色创造出独一无二的表现。这项技术预示着叙事内容创作方式的革新，特别是在那些通常受限于资源的独立影片和数字媒体领域，它为创编辑提供了前所未有的便利。

在公众人物形象安全和保护方面，Act-One与Runway的其他产品一样，配备了一整套严密的安全措施。这些措施包括防止未授权生成包含公众人物的内容，以及确保声音使用权的技术工具。

04 展望未来

随着Act-One的逐步推出，Runway热切期待看到艺术家、影片制作人和其他创编辑会如何利用这个新工具实现其想法。有了Act-One，复杂的动画技术对于更广泛的创编辑群体来说触手可及，使更多的人能够探索新的故事叙述形式和艺术表达方式。


来源：36kr