日本变身英雄电视节目《暴太郎战队Donbrothers》中的动作捕捉

2022-10-20 14:40:31 关典

日本变身英雄电视节目《暴太郎战队Donbrothers》中的动作捕捉

采访对象:Junichi Higuchi(东映数字中心/ Zukun Lab虚拟制作组制作人)、Kenshiro Yasui(I-Pairs动作捕捉总监)、Hiroki Yamada(Amineworks总经理)。

超级战队系列是日本的一档元老级电视节目,其放映时间横跨40年。超级战队系列的最新作《暴太郎战队Donbrothers》已经在今年制作完成并开始在电视台放映。毫不夸张地说,几乎所有的日本孩子都是看着这部电视剧长大的。《暴太郎战队Donbrothers》是一部由五个主角变身英雄直面反派的正义游侠系列电视节目,在制作中团队使用了动作捕捉技术。这项工作标志着虚拟生产首次被用于实际的项目产出过程中。下面是本次采访中的一些总结。

虚拟现实|虚拟仿真|三维虚拟技术|可视化工程|虚拟仿真交互|航空航天|汽车仿真|轮船仿真|列车仿真|多媒体应用|轨道交通|船舶制造|能源矿业|电力仿真|游戏开发|虚拟漫游|建筑设计|石油钻井|核能开放|互动营销|展览展示|爱迪斯通

您能告诉我们为什么会选择Xsens运动捕捉来完成这项工作吗?

Higuchi:在常规作品中,真人演员会穿着英雄服装表演变身后的英雄,但在这部作品中,从一开始我们的设定就与原先的作品有所不同,英雄们在变身后会变成与人类正常体型不完全相同的英雄角色。最初,在战队系列中,我们已经习惯于使用新技术在拍摄中克服各种挑战,就像之前的《机界战队全开者》,背景是实时渲染的。我们使用虚拟制作创建全部场景。当我第一次听说这项技术时,我认为这将是一个用来引入CG角色的好方法。但我又听到了许多想要进行实时虚拟制作的需求,所以我们决定通过使用Xsens MVN来进行实时运动捕捉从而驱动项目的进行,这同样也是一种能够支持定位的方法。

Xsens运动捕捉在场地中是如何使用的?

Yasui:这一次,我们有两个穿着Xsens MVN动捕套装的演员同时进行CG角色的动作捕捉。在MVN上获得的数据会通过网络流实时发送给软件。

您能告诉我们你们在现场花了多少时间吗?另外能否给出一些拍摄Mocap的建议?

Yasui:首先,我们在进入现场之前花了足够的时间做准备。由于运动将实时传输,我们在设备选择和系统验证方面做了大量工作,以便在流数据传输时做到没有延迟。

在现场,作用点会被变为一个一个的剪辑。对于每个剪辑,我们会选择一个位置和方向,以便mocap演员可以检查视角和位置。由于系统基础上有大量的移动,因此系统被设置为在推车上快速移动和部署。由于在运动中有许多战斗场景,因此我们对bodypack和电池的位置进行了重新安排。bodypack和电池被转移到胸侧位置,以减轻摔倒时的负担,并支持上半身轻松移动。由于胸侧没有口袋,演员必须佩戴额外的背带。

你们现场拍摄的实时合成管道是什么?

Yamada:我们将运动捕捉数据发送到MotionBuilder进行最后的处理,然后发送到Unity。在Unity中我们创建灯光,阴影和后期处理,控制可移动设备的动画,添加对其他小物件的控制,链接实景相机和Unity摄像机的移动等工作。为了加快这方面的运作,我们开发并使用了一个专门的内部拍摄工具。在Unity中创建的图片被发送到Ultimatte,并与真人视频和色度键实时合成。当然我们也调整了白平衡等参数。所以在合成后并不存在不一致性。最后,我们使用了Ki Pro记录合成后的图片和每个合成前的图片和遮罩。

您能告诉我们在重定CG角色模型后你们的工作有什么改变吗?

Yamada:由于模型的形状与真实的人体骨骼非常不同,因此演员的动作会受到限制。为了做那些由于骨骼问题而不能做的姿势,我们也做了一些事情,比如在MotionBuilder中对动作进行修正。

虚拟现实|虚拟仿真|三维虚拟技术|可视化工程|虚拟仿真交互|航空航天|汽车仿真|轮船仿真|列车仿真|多媒体应用|轨道交通|船舶制造|能源矿业|电力仿真|游戏开发|虚拟漫游|建筑设计|石油钻井|核能开放|互动营销|展览展示|爱迪斯通

能告诉我们您的专业领域吗?

Yasui:我们专注于各种应用领域的运动捕捉工程。用于视频制作和角色现场的动作捕捉。此外我们还涉及到很多领域,比如运动工程,传统表演艺术等。最近,我们一直专注于使用虚幻引擎的虚拟现场制作,我们正在使用动作捕捉和照明系统进行制作。

Yamada:这是一个创造性的过程,需要解决问题的能力。我们将把我们追求的理想具体化,而不仅仅是完成项目。建模和设置、近年来的虚拟制作、实时图形工作流(如使用元宇宙和游戏引擎的视频制作)以及各种概念仍在构建中。我擅于开拓未来。

在其他拍摄项目中,Xsens还能在哪些领域得到应用?

Yasui:我觉得Xsens可以用在任何结合真人和CG角色的视频作品中。我们相信,在片场与其他mocap演员同时录制动作可以缩短制作周期,并使CG角色更加生动。

Yamada:我认为Xsens MVN最大的优势是它允许我们使用影视拍摄地现场进行拍摄,正如我们在《暴太郎战队Donbrothers》中做的那样。这是光学动作捕捉系统系统很难做到的。我认为将来我们会有很多机会用到Xsens MVN。Xsens MVN的优点和光学动作捕捉系统的优点是不一样的,所以在以后的虚拟制作拍摄中,我们会根据具体情况做出最优的决定。

电话
产品
方案
案例