查看原文
其他

一键出片!CG神器Wonder Studio开放公测(附使用教程)

影视制作杂志 影视制作 2023-08-28


整理自 | 威猫设计、CG世界、今说新语‍

阅 | 010-86092062


今年3月份,AI创作神器Wonder Studio在世界范围内震惊了整个CG圈。



面对Wonder Studio利用AI对传统CG行业颠覆式的操作演示,有的人拍手称快,有的人眉头紧锁,有的人风轻云淡,对传统影视CG制作流程的短期不可替代性,自信满满。不管属于哪种态度,本文就为大家介绍一下Wonder Studio 到底是什么?


01/网站介绍


Wonder Studio是一个AI视频编辑技术,它可以自动地将CG角色动画、光照合成到实景中。它的原理是利用了神经网络和机器学习的方法,来检测视频中的演员的表演,并将其转换为CG角色的动作。它还可以根据视频的环境和光照条件,来调整CG角色的材质和阴影,使其与实景更加协调。


Wonder Studio的特点是它可以在浏览器中运行,不需要安装复杂的软件或使用昂贵的硬件。它也不需要联网或API密钥,只需要上传视频和CG模型,就可以生成结果。它还可以导出各种元素,如动作捕捉、角色通道、透明蒙版、干净画面、相机跟踪等,方便用户在其他软件中进行后期处理。



02/使用流程


首先用户在Wonder Studio中上传格式为MP4或MOV的,长达2分钟的剪辑预览视频。系统会自动检测每个剪辑,在不同剪辑间追踪演员,当在视频的参考帧中识别出需要被替换的演员后,用户可以自己选择一个3D角色来替换他们。


Wonder Studio内置了一系列预设的角色,主要是机器人和卡通形象,同时用户也可以通过Blender或Maya上传自己创建的角色。(格式为.blend或FBX)


※Wonder Studio支持的CG角色模型的多边形面数,需要控制在150万面以内。当然,这个量级的模型已经能够呈现非常精致和逼真的细节了。同时,这些角色模型可以进行面部形状的设定,通过调整面部形状键值来创建各种丰富的面部表情。


此外,还可以为角色设置多达10万根的独立发丝,这样就可以呈现出非常自然飘逸的头发效果。



角色创建完成后,Wonder Studio会用CG角色替换真人演员,将CG角色的动作和面部表情与原始演员的动作和面部表情进行匹配。导出干净背景板、遮挡轮廓遮罩 、动作捕捉数据以及最终视频。


除了简单地渲染最终生成的视频(最高可达4K分辨率)之外,Wonder Studio还可以导出生成视频过程中使用的各种数据:包括演员的干净背景板和Alpha遮罩(均以PNG图像序列形式导出)、FBX格式的动作捕捉数据、对于Blender用户来说,还包括完整的Blender场景文件。



03/特点及优势


简化和加速VFX制作流程



Wonder Studio最大的优势是它可以大大简化和加速VFX制作的流程,让用户不需要使用专业的摄影设备或动作捕捉系统,就可以创建逼真的CG角色。


系统会根据单摄像机镜头自动检测演员的表演,然后将表演转移到已选择的CG角色上,再自动对其添加动画、灯光和将其组合到真实场景。只需将CG角色模型上传到一个镜头或整个场景中,系统就会自动检测剪辑,并在整个镜头序列中追踪演员。



支持多个角色和风格化角色




Wonder Studio中,使用者可以同时分配多个角色来创建科幻世界。它还可以让用户自由地选择和更换CG角色,甚至使用一些独特的风格化角色。它还可以让用户在不同的场景中重复使用同一个CG角色,节省成本和时间。


能够导出各层单独元素



正如使用流程中谈到,包括演员的干净背景板和Alpha遮罩(均以PNG图像序列形式导出)、FBX格式的动作捕捉数据、对于Blender用户来说,还包括完整的Blender场景文件。


运动捕捉

角色通道

Alpha遮罩

干净背景板

摄像机追踪

Blender文件

最终渲染


04/当前限制


但在测试中也发现目前WonderStudio在动作捕捉方面表现出色,但在其他一些方面还有提升空间。


除了上面我们提到的,对于3D角色的多边形数量上限和4K渲染分辨率的限制之外,Wonder Studio最大的技术限制是它目前还不支持角色与角色,或是角色与物体之间的互动,这就在一定程度上限制了它能够处理的镜头种类。


除此之外,Wonder Studio目前提供的遮挡支持也只是部分支持,所以当角色在镜头中被前景物体遮挡时,输出质量可能会下降。但是,对于视觉预览和对视效质量要求不高的项目,Wonder Studio已经是一个很有前景的解决方案了。


05/收费方式


Wonder Studio网站上目前提供以下几种订阅方案:


按年订阅每月费用

按月订阅每月费用


最后附上油管博主上传的Wonder Studio使用教程,感兴趣的朋友们可以去官网尝试一下。‍



推荐阅读



技术赋能,高分IP重启!《全员加速中2023》体验在元宇宙中“追与逃”

诗意、壮美、考究! 揭秘《长安三万里》如何用动画展现“唐风之美”

一整个震撼!盘点那些令人印象深刻的电影配乐

电影剪辑技法集大成者——《瞬息全宇宙》当代剪辑艺术观念解析

庆祝中国共产党成立102周年交响音乐会舞美灯光设计解析




我知道你在看


您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存