Wonder Studio正式发布,真人一键变CG角色

AI不断“入侵”CG行业,不少业内人士对它“又爱又恨”。近日又一AI利器——Wonder Studio结束封闭测试阶段正式发布。

Wonder Studio备受瞩目的一点在于它可以集成到现有的视效预览和VFX工作流程中。按照官方说法,这款AI工具自动化了80%-90%需要手动的视觉特效工作,使艺术家有更多的时间专注于创意决策,以大大提高工作效率。

具体地来说,Wonder Studio能够处理素材、跟踪动作、生成遮罩和干净背景板,然后用CG角色替换演员,匹配姿态和表情并调整灯光效果,而完成这一系列繁琐的工作,艺术家们只需要一台相机!

简单介绍下Wonder Studio的特点。

1. 无需针对逐个镜头展开工作

只需将CG角色模型上传到一个镜头或整个场景中,系统就会自动检测剪辑,并在整个镜头序列中追踪演员。

2. 无需繁琐的逐帧视觉特效工作

系统会根据单摄像机镜头自动检测演员的表演,然后将表演转移到已选择的CG角色上,再自动对其添加动画、灯光和将其组合到真实场景。

3. 支持多角色

可以分配多个角色来创建科幻世界。

4. 能够导出各层单独元素

【运动捕捉】

【角色通道 Character Pass】

【Alpha遮罩】

【干净背景板】

【摄像机追踪】

【Blender文件】

【最终渲染】

本地设备算力不足,推荐使用渲云云渲染农场,目前已支持3ds Max、Sketchup、C4D、Maya、UE、AE等主流软件插件,随时调用各种高配机型,按需付费。

那么Wonder Studio究竟是如何运作的呢?

众所周知,传统的影视做特效人物,我们需要:3D建模→骨骼绑定→开始动作捕捉实拍→动作匹配→模型烘焙→贴图,之后还要调整灯光进入最终渲染。而到了Wonder Studio这里,仅需动手点一下即可实现上面所有流程,直接出合成结果。

现在就让我们看看,这款奔着革现代影视工业命而来的AI工具是如何运作的吧!

1. 用户可以上传格式为MP4或MOV的长达2分钟的剪辑预览视频。

2. 系统会自动检测每个剪辑,在不同剪辑间追踪演员,当在视频的参考帧中识别出需要被替换的演员后,用户可以自己选择一个3D角色来替换他们。Wonder Studio内置了一系列预设的角色,主要是机器人和卡通形象,同时用户也可以通过Blender或Maya上传自己创建的角色。(格式为.blend或FBX。)

* Wonder Studio支持的CG角色模型的多边形面数,需要控制在150万面以内。当然,这个量级的模型已经能够呈现非常精致和逼真的细节了。同时,这些角色模型可以进行面部形状的设定,通过调整面部形状键值来创建各种丰富的面部表情。

此外,还可以为角色设置多达10万根的独立发丝,完美呈现出非常自然飘逸的头发效果。

3.  然后,Wonder Studio会处理视频,用CG角色替换真人演员,将CG角色的动作和面部表情与原始演员的动作和面部表情进行匹配,导出干净背景板、遮挡轮廓遮罩 、动作捕捉数据以及最终视频。

除了简单地渲染,最终生成的视频(最高可达4K分辨率)之外,Wonder Studio还可以导出生成视频过程中使用的各种数据:包括演员的干净背景板和Alpha遮罩(均以PNG图像序列形式导出)、FBX格式的动作捕捉数据、对于Blender用户来说,还包括完整的Blender场景文件。

Wonder Studio的技术限制

除了对3D角色的多边形数量上限和4K渲染分辨率的限制之外,Wonder Studio最大的技术限制是它目前还不支持角色与角色、或是角色与物体之间的互动,这就在一定程度上限制了它能够处理的镜头种类。

此外,Wonder Studio目前提供的遮挡支持也只是部分支持,所以当角色在镜头中被前景物体遮挡时,输出质量可能会下降。但是,对于视觉预览和对视效质量要求不高的项目,Wonder Studio已经是一个很有前景的解决方案了。

在很多人看来,Wonder Studio清楚地表明了AI电影制作工具未来的发展方向。挪威的数字艺术家Polyfjord就使用EmberGen和Wonder Studio的动作捕捉功能,演示了一波如何让自己华丽变身烟雾角色;明明是卫衣+棒球帽,一瞬间就仙气飘飘了。

Wonder Studio是基于浏览器的,可在Chrome或Safari上运行,目前不支持移动浏览器,兼容Blender 3.3.1+ 和 Maya 2022+。

/v23/jpg/swiper2-34c8e7ae.jpg
/v23/jpg/swiper1-fc05a4ec.jpg
/v23/jpg/swiper2-34c8e7ae.jpg
/v23/jpg/swiper1-fc05a4ec.jpg

热搜关键词

底部宣传图

渲云,您身边的渲染专家!

赞奇科技旗下CG视效行业云渲染品牌
立即注册
联系我们