分享好友 最新动态首页 最新动态分类 切换频道
AI视频又一大突破!一人一机,拍出电影级动画表情捕捉
2024-12-25 12:35
智东西

  编译 | 汪越

AI视频又一大突破!一人一机,拍出电影级动画表情捕捉

  编辑 | 漠影

  智东西10月23日消息,据VentureBeat报道,10月22日,明星AI视频创企Runway推出了一项名为Act-One的新功能。

  Act-One集成在了Runway的视频生成模型Gen-3 Alpha中。用户可以使用手机或相机轻松录制自己或他人的视频,之后利用Act-One功能将录制对象的面部表情转移到AI生成的角色上。

  自2022年底首批文生视频模型问世以来,AI视频技术在真实性、分辨率、保真度、提示匹配度(即AI生成的视频与用户提供的描述或示例的契合程度)以及生成数量等方面取得了显著进步。

  然而,对于许多AI视频创作者来说,一个持续存在的挑战是如何在AI生成的角色中实现真实且可控的面部表情。大多数现有的解决方案在这方面表现得相当有限。

  如今,Act-One功能为这一难题提供了解决方案,在使用生成模型来再现真人动作和动画内容方面迈出了重要的一步。

  所有拥有Runway账户的用户都可以尝试这项新功能,通过Gen-3 Alpha视频生成模型来创建新的视频。不过,目前只有积分充足的用户才能使用该功能。Gen-3 Alpha于今年早些时候推出,支持多种输入方式,包括文字转视频、图片转视频及视频转视频。用户可以通过描述场景、上传图片或视频,或者结合这些元素,让Gen-3 Alpha基于输入内容生成全新的视频。

  尽管Act-One当前的可用性仍然有限,但已经获得了不少AI视频创作者的高度评价。此外,Runway最近宣布与好莱坞知名电影公司狮门影业达成合作,将基于狮门影业超过2万个影片的内容库,开发定制化的AI视频生成模型。

  传统的面部动画制作通常是一个复杂且耗时的过程,涉及动作捕捉设备、手动面部绑定和多个参考镜头。这些技术的目标是将演员的表演转化为适合动画流程的3D模型。

  传统3D动作捕捉的主要难点在于如何在数字角色中保留参考镜头中的情感和细微表情。为了克服这一难题,近年来许多AI初创公司致力于减少精确动作捕捉所需的设备。例如,去年成功筹集了1000万美元种子轮融资的3D动作捕捉应用Move AI,推出了一项单设备动作捕捉功能。通过这一功能,用户可以使用智能手机摄像头或数码相机,实现对全身和更广泛动作的捕捉。

  Act-One的一大优势在于它能够从各种摄像机角度和焦距提供电影级的逼真输出,并且在不同角度下都能保持高保真的面部动画。这种灵活性增强了创作者通过角色表演讲述情感共鸣故事的能力,而这在过去通常需要昂贵的设备和复杂的多步骤工作流程才能实现。

  现在,用户只需使用普通相机和一名演员阅读并表演剧本中的不同角色,即可创建叙事内容。一个演员仅用常见的相机就可以扮演多个角色,模型会为每个角色生成不同的输出。这种能力有望改变叙事内容的创作方式,特别是在独立电影制作和数字媒体领域,这些领域通常缺乏高端制作资源。

  结语:Act-One突破面部识别技术障碍,推动AI视频创意新高度

  Act-One突破了AI面部识别技术的障碍,将有助于Runway在与越来越多竞争对手的竞争中脱颖而出。竞争对手包括,AI视频初创公司Luma AI、中国AI初创公司MiniMax旗下的AI视频生成器Hailuo、快手旗下的AI视频模型Kling,以及AI视频初创公司Genmo昨天刚推出的Mochi 1开源视频生成模型。

  通过减少传统角色动画的技术障碍,Runway有望在数字媒体领域激发新的创造力。借助Act-One,复杂的动画技术变得更加易于使用。随着Act-One的推出和被更多使用,我们或许会看到许多艺术家、电影制作人和其他创作者利用这一新工具实现他们的创意。

最新文章
excel 区域内按行排序_在Excel 2010中对行进行排序
Most of the time when you're sorting in Excel, you sort based on the values in one or more columns. If your workbooks are like mine, it's rare that you sort horizontally, based on the values in a row. But if you ne
c编程向计算机发送数据,一文读懂一台计算机是如何把数据发送给另一台计算机的...
这是之前一篇文章的修订版,感觉是一篇很不错的文章,重新修改排版了下。前言天各一方的两台计算机是如何通信的呢?在成千上万的计算机中,为什么一台计算机能够准确着寻找到另外一台计算机,并且把数据发送
CTF 工具 集合
From:Hello CTF:在学习CTF前希望您具备一些CS领域的基础知识,这里推荐您先阅读 JANlittle师傅写的CS入门资料 ( 点此跳转 ) 大致具备CS领域的基本技能后再开始CTF的学习。 入入入入门(fén)综述࿱
AI小助手使用指南:涵盖TV版操作与百度AI小助手应用教程
在这个科技日新月异的时代人工智能()正在逐步渗透到咱们生活的各个角落从智能手机、智能家居到智能电视等设备。小助手作为人工智能技术的产物它能帮助我们更高效地完成日常任务如播放音乐、查询天气、设置闹钟等,甚至可以成为我们的生活
08山东电视台公共频道节目推介暨广告年会直播
12月2日19:00时现场直播2008山东电视台公共频道节目推介暨广告年会  【大片头】  【新闻女生组推介板块】  1、 开场歌舞:《魅力》2’40  表演:七名新闻女生  伴舞:20男生  【主持人开场】孙亮 郭培鑫  【《新闻女生组》
Android 的开源电话/通讯/IM聊天项目全集
一、Android的XMPP客户端 BeemBeem 是一个运行于 Android 手机平台的 XMPP (jabber) 的客户端软件,兼容标准的 XMPP 服务器和服务,例如 Ejabberd, Openfire, Facebook, 和 Gmail). 支持 SASL, 代理(Socks4, Socks5, HTTP), DNS SRV, and c
ai智能机器人源码定制开发快速搭建送服务器
聊天机器人chatai*近推出了一款新产品——-Lisa,它能帮助人们更好地交流和分享想法。这款软件目前还在测试阶段,已经有很多人使用过了。1:chat在线聊天机器人的开发背景随着移动互联网的发展,智能手机已经成为人们生活中不可或缺的工具
AI智能生成文字Logo:一站式解决个性化标识设计需求
在数字化浪潮的推动下形象已成为企业竞争力的关键组成部分。一个独有、个性化的标识不仅可以吸引消费者的目光还能传递企业的核心价值。传统的标识设计往往需要耗费大量时间和精力且难以满足个性化需求。如今智能生成文字Logo的出现为解决这
BTS WORLD
【基本介绍】『一睁眼竟是2012年,而且我还成了Big Hit的职员?!在BTS还没出现的世界,我成为了BTS的经纪人。现在他们能否出道,全看我了!』难道就是追星的最高境界?我还能回到原来的世界吗?如同梦境一般在眼前展开的的神秘故事,现在
Autodesk Maya 2023 for Mac 正版激活永久使用(支持M1)
兼容M1的Autodesk Maya 2023 终于更新啦!!玛雅是专业的三维动画设计工具,这次的maya2023中文版引入Blue Pencil,它取代了现有的油性铅笔工具,提供更多用于文本和形状的绘图工具,以及用于注释的图层系统,另外还更新了布尔建模、拓扑工
相关文章
推荐文章
发表评论
0评