宝子们想,醒醒!都别瘫在办公桌前划水了!!
去年才闪亮登场的,能一键让真人变CG的AI王者Wonder Studio最近又放大招了!
介绍新功能之前,咱们再来回顾下Wonder Studio有多强:能够处理视频素材、跟踪动作、生成遮罩和干净背景板,随后用CG角色替换真人演员,精确匹配他们的姿态和表情,并调整灯光效果,以实现无缝融合。
而完成这样一系列看似复杂的工作,艺术家们其实只需要一样东西→一台相机!
众所周知,Wonder Studio背后的公司Wonder Dynamics在今年早些时候被Autodesk收购。
这一次也是他们加入Autodesk以来最大的一次更新:推出了一项利用前沿视频转3D场景技术保护加速动画电影制作的新功能-Wonder Animation的测试版。
作为Wonder Studio工具集的一部分,Wonder Animation的视频转3D场景技术的创新部分在于,能够通过使用AI技术,把包含多个剪辑(不同的镜头切换)和各种类型的镜头(如远景、中景、近景等)的普通视频,变成一个可以互动和编辑的3D场景,并匹配每个摄像机与角色和环境之间的位置和运动关系。
原视频中的角色会被转换成3D模型,同时保持原视频中的动作、表情和场景布置,艺术家可以在他们喜欢的软件中编辑,以此来加速动画电影的制作过程。
目前,Wonder Animation的测试版已经面向所有Wonder Studio用户开放,在帮助艺术家们轻松制作出完整的动画电影的同时,还能确保艺术家在整个创作过程中保持完全的创意控制权。
生成3D虚拟场景
Wonder Animation,除了针对传统的视觉特效,其功能主要面向3D动画制作。不仅能够增强现有视频的视觉效果,还可以帮助艺术家们从头开始制作完整的3D动画电影。
用户可以先拍摄一段包含多个剪辑和不同镜头类型的视频,然后在编辑软件中对这些镜头进行剪辑、排列,形成连贯的视频序列;而Wonder Studio则会将这些编辑好的2D视频内容转化为一个3D虚拟场景,其中的所有元素(角色、环境、摄像机等)都会在一个连续的空间中呈现,同时确保每个摄像机的位置和移动与角色和环境的关系准确匹配。
Wonder Animation可以处理包含不同镜头类型(广角、中景和特写)的视频序列,并且能够使用先进的“高级运动预测”来重建角色运动,即使在某些情况下有一些瑕疵或遮挡,也能确保3D场景的流畅和连贯性。
不过有一点需要注意的是,虽然Wonder Animation能够将视频中的角色和摄像机的运动转换成3D动画,但不会自动将视频背景中的物体转换成3D模型。用户需要单独创建3D环境,并将其导入到生成的3D场景中,以完成整个3D虚拟场景的构建。
完全可编辑输出
与风格迁移或图像处理的方法完全不同,Wonder Animation的视频转3D场景技术输出的是一个整整的,完全可编辑的3D虚拟场景,输出的内容包括3D动画、角色、环境、灯光和摄像机跟踪数据。
用户可也将这些内容导入到自己常用的如Maya、Blender或Unreal等3D软件中进一步编辑和优化。
价格
系统要求
Wonder Animation作为Wonder Studio所有订阅计划的一部分,目前处于测试阶段。基于浏览器运行,在Chrome或Safari中均可使用,暂时不支持移动浏览器。
Pro订阅:149.99美元/月,或1499.88美元/年,最高导出分辨率为4K,同时还可以导出旋转遮罩(roto masks)。
另外,Wonder Animation使用一个基于信用点数的系统来计算视频处理的费用,处理一秒钟的视频需要20积分(Lite订阅用户每月可以获得3000积分,Pro订阅用户可获得12000积分)。
https://adsknews.autodesk.com/en/news/autodesk-launches-wonder-animation-video-to-3d-scene-technology/
《荒野机器人》概念图和动画制作幕后
他用PS把Blender模型都涂成了脑洞超大的概念图