一键生成?AI动画工具可实现CG制作全流程全自动化

Xsens动作捕捉 2023-04-27 2785

一键生成?AI动画工具可实现CG制作全流程全自动化  第1张

整理自 | CG世界、wuhu动画人空间

阅 | 010-86092062


你是否曾经幻想过将脑海里创作的画面快速成片?AI帮你一键生成高精度CG动画,还会打破传统动画制作流程,只要会拍视频就可以做动画?


现在这不仅是梦想!最新推出的AI动画工具可实现视频自定义变身你想要的动画角色。


一键生成?AI动画工具可实现CG制作全流程全自动化  第2张
一键生成?AI动画工具可实现CG制作全流程全自动化  第3张


3月9日,美国Wonder Dynamics推出了一款新的AI动画工具出名叫Wonder Studio,它的具体功能可自动将 CG 角色制作动画渲染打光并将其合成到真人场景中,这款AI应用已经可以打破我们传统的动画制作流程,不需要那么多设备和软件,只需要一台相机拍摄好视频就可以了...


一键生成?AI动画工具可实现CG制作全流程全自动化  第4张


从视频中看到,不但连模型、绑定、动画解决了,连灯光、渲染、后期这些高精度效果都实现了。


Wonder Studio技术


Wonder Studio AI工具网上到底是怎么用的呢?


首先,把你的科幻电影剧本写好,比如需要真人和CG角色结合的,主角是个机器人,需要合成到实拍场景。那么你只需要拿着摄像机去拍摄就好了,CG机器人先用真人表演替代。


拍摄完成后,拿着素材导入这个软件里,只要你选择想要的CG角色,分配给实拍的真人表演。对,就像你是导演选角一样。



接下来系统就会利用人工智能跟踪演员的表演,用CG角覆盖原来真人角色,自动生成动画、灯光,而且直接将CG角色合成到场景里。


一键生成?AI动画工具可实现CG制作全流程全自动化  第5张


其次,无论镜头还是一个完整的序列,该工具都可以对演员进行分析,然后捕捉身体的任何部位和任何动作


一键生成?AI动画工具可实现CG制作全流程全自动化  第6张


最后,甚至是连真实演员的面部表情都可以轻松捕捉,完成上述这些工作,你只需要一台相机。


一键生成?AI动画工具可实现CG制作全流程全自动化  第7张


你以为该工具的神奇之处到这里就结束了?并不是!除了可以得到渲染结果以外,Wonder Studio还提供了导出各个层的功能,无论是灯光、相机还是动画,用户依旧可以在3D空间中再进行控制或者是详细调整,你只需要完成最后的视觉效果镜头。


一键生成?AI动画工具可实现CG制作全流程全自动化  第8张
一键生成?AI动画工具可实现CG制作全流程全自动化  第9张


该工具还有一个重点,它可以分析动画和运动数据(包括手和脸部变化)、逐帧的人物和物体轮廓,甚至是地形和其它环境,都可以自动匹配,因为Wonder Studio 呈现的是一种多角度跟踪表演。


幕后制作团队是谁?


一键生成?AI动画工具可实现CG制作全流程全自动化  第10张

官方网站:https://wonderdynamics.com/


这一AI工具的幕后创始人是两位年轻的创业者,Todorovic 和 Sheridan 相识并合作多年,他们因为都是电影和科技的狂热爱好者,但是做电影特效的成本太高了,他们就在想是否有什么工具可以在低成本的情况下开发特效电影,两人一见如故并合伙开公司开始投入AI的研发。


于是,他们在 2021 年初筹集了250 万美元的种子轮融资,后面又获得了 1000 万美元的 A 轮融资。Todorovic 说,他们的公司到目前为止都是在秘密运营...


一键生成?AI动画工具可实现CG制作全流程全自动化  第11张

幕后创始人Nikola Todorovic和Tye Sheridan


他们希望把Wonder Studio 打造成一个平台,让艺术家们使用的过程像在 Photoshop 中选择滤镜或画笔一样简单。这听起来好得令人难以置信,但 Sheridan 和 Todorovic 已经研究了三年,结果证明了这一点。


一键生成?AI动画工具可实现CG制作全流程全自动化  第12张


“我们构建了一些可以自动化整个过程的东西,逐帧实时动画,不需要动作捕捉。它会根据单个摄像机的镜头自动检测演员的位置进行追踪。它可以负责摄像机运动、灯光、颜色,完全用 CG 代替演员,”Todorovic 解释道。


而且还可以应用在当下流行的短视频上,已经有用户用它生成好玩的内容发布在 TikTok 上。


一键生成?AI动画工具可实现CG制作全流程全自动化  第13张



AI取代真人?


关于CG动画流程制作,两位创始人认为在CG动画制作流程中有很多的工作其实都是苦差事,还会有很多重复性的工作,我们认为这些工作应该是可以交给AI的,这样才能优化效率,把艺术家们的时间解放出来。


“当然,我们认为你不能用 AI 取代艺术家,我们要增强和赋予他们更多的权力。这不会影响到他们正在做的事情;它的应用是可以使 80-90% 的重复性的特效工作自动化,而将创造性的工作留给艺术家们,”Todorovic 解释道“人工智能的美妙之处在于将如此复杂的事物简化。”


还有好多从业者包括想学习绘画和动画的学生们会担心这是否会让很多人失业,我们认为这是不太可能的!特效行业是非常庞大和忙碌运转的,尤其是漫威和 Netflix 等这些大公司每年都会定期发布要求极高的 CG 作品,而这些作品必须由数十家独立的 VFX 工作室完成。


比如一个做斗篷,一个做爆炸,另一个做数字化妆,还有一个可变形的表面特效等等。这些工作室每年的档期都会排满到很多年后。这些档期约好都需要支付定金的,但如果他们可以承担超出他们原有两倍的工作,他们不是可以获得更多的业务吗?作品的产量也可以上去。


“我们希望艺术家自己创作。你还可以将你的模型文件上传平台,就像你导入 Blender 或 Unreal 或其他任何东西一样,“Todorovic 说。模型也可以在平台上购买。


他们计划与多个特效工作室合作,以创建和改进Wonder Studio的更多应用和功能。


该平台目前处于测试阶段,但已被著名的动作导演罗素兄弟用于即将上映的 Netflix 电影《电幻国度》。


一键生成?AI动画工具可实现CG制作全流程全自动化  第14张
一键生成?AI动画工具可实现CG制作全流程全自动化  第15张
一键生成?AI动画工具可实现CG制作全流程全自动化  第16张


编剧克里斯托弗·马库斯、斯蒂芬·麦克菲利共同操刀剧本,环球影业出资打造。故事发生在一个全新的1997年,在技术崩溃后,人类被孤立在各自的VR头盔里,与一种奇怪的巨型战斗无人机作战。这时一个离家出走的少女(米莉饰)和她的机器人在美国西海岸旅行。


创始人Sheridan在发布会上强调。“我们本质上是讲故事的人,我们只是在构建技术来帮助我们讲更好的故事。人工智能为制作更多电影和听到更多声音提供了巨大机会。”


一键生成?AI动画工具可实现CG制作全流程全自动化  第17张



一键生成?AI动画工具可实现CG制作全流程全自动化  第18张


一键生成?AI动画工具可实现CG制作全流程全自动化  第19张


一键生成?AI动画工具可实现CG制作全流程全自动化  第20张


一键生成?AI动画工具可实现CG制作全流程全自动化  第21张


一键生成?AI动画工具可实现CG制作全流程全自动化  第22张



一键生成?AI动画工具可实现CG制作全流程全自动化  第23张



The End