Autodesk旗下Wonder Dynamics 发布视频转3D功能,将真实视频转换为 3D 场景, 并在一个 3D 空间内包含所有摄像机设置、角色身体和面部动画以及所有元素均可编辑。作为 Wonder Studio 工具集的一部分,Wonder Animation 的突破性视频转 3D 场景技术可以拍摄和编辑包含多个剪辑和各种镜头的序列,然后使用 AI 将场景重建到 3D 空间中。
Wonder Dynamics 在AI增强的视觉效果领域取得了显著进展,其最新的工具进一步自动化了动画制作过程。这款工具可以让用户输入几乎任何视频,并获得一个完全可编辑的3D场景,包括角色。这一创新不仅简化了动画制作流程,还为动画师和电影制片人提供了更多创作自由。
主要功能
视频到3D场景转换:
- 用户可以输入任何视频,工具会自动生成一个完全可编辑的3D场景,包括角色和背景。
- 这一功能结合了公司现有的插入式演员替换功能,可以轻松地将真人演员替换为与其动作同步的动画3D角色。
多摄像机支持:
- 工具支持使用多个摄像机拍摄同一场景,就像拍摄真人演员一样。视频到3D的流程会将这些摄像机放置在同一个场景中,虚拟摄像机会根据脚步移动和其他指标来跟随原始动作。
- 这对于在初步拍摄阶段进行摄像工作非常有帮助,避免了在拍摄当天才决定拍摄角度的问题。
行业标准3D资产:
- 与一些生成和文本到视频的模型不同,Wonder Dynamics的工具输出的是行业标准的3D资产。
- 用户可以在Blender、Maya或Unreal等主流3D软件中编辑每个单独元素,包括拖放摄像机、调整角色动作、重新构图和重新照明场景。
实际应用场景
- 预可视化:动画师可以在客厅里拍摄和编辑视频,按照期望的方式进行表演、剪辑和摄像机构图。这一过程提供了快速的预览,有助于在制作早期阶段优化故事流程。
- 早期制作阶段:拍摄两个朋友在走廊上行走的视频可以轻松转换为机器人在未来街道上行走的场景,这对于预可视化和故事板制作非常有用。
创始人观点
Nikola Todorovic,Wonder Dynamics的联合创始人表示:“这个想法是,你可以在客厅里拍摄和编辑你的视频,按照你希望在动画中看到的方式进行表演、剪辑和摄像机构图。这个过程将为你提供快速的预览,最重要的是,可以在Blender、Maya或Unreal中编辑每个单独元素的3D场景。”
当前状态
- 测试阶段:任何使用Wonder Studio的人都应该能够今天访问这一动画功能,尽管它目前仍处于测试阶段,并可能会根据用户反馈进行改进。
评论0