日本变身英雄电视节目《暴太郎战队Donbrothers》中的动作捕捉

日本变身英雄电视节目《暴太郎战队Donbrothers》中的动作捕捉

采访对象：Junichi Higuchi（东映数字中心/ Zukun Lab虚拟制作组制作人)、Kenshiro Yasui（I-Pairs动作捕捉总监）、Hiroki Yamada（Amineworks总经理）。

超级战队系列是日本的一档元老级电视节目，其放映时间横跨40年。超级战队系列的最新作《暴太郎战队Donbrothers》已经在今年制作完成并开始在电视台放映。毫不夸张地说，几乎所有的日本孩子都是看着这部电视剧长大的。《暴太郎战队Donbrothers》是一部由五个主角变身英雄直面反派的正义游侠系列电视节目，在制作中团队使用了动作捕捉技术。这项工作标志着虚拟生产首次被用于实际的项目产出过程中。下面是本次采访中的一些总结。

您能告诉我们为什么会选择Xsens运动捕捉来完成这项工作吗？

Higuchi：在常规作品中，真人演员会穿着英雄服装表演变身后的英雄，但在这部作品中，从一开始我们的设定就与原先的作品有所不同，英雄们在变身后会变成与人类正常体型不完全相同的英雄角色。最初，在战队系列中，我们已经习惯于使用新技术在拍摄中克服各种挑战，就像之前的《机界战队全开者》，背景是实时渲染的。我们使用虚拟制作创建全部场景。当我第一次听说这项技术时，我认为这将是一个用来引入CG角色的好方法。但我又听到了许多想要进行实时虚拟制作的需求，所以我们决定通过使用Xsens MVN来进行实时运动捕捉从而驱动项目的进行，这同样也是一种能够支持定位的方法。

Xsens运动捕捉在场地中是如何使用的？

Yasui：这一次，我们有两个穿着Xsens MVN动捕套装的演员同时进行CG角色的动作捕捉。在MVN上获得的数据会通过网络流实时发送给软件。

您能告诉我们你们在现场花了多少时间吗？另外能否给出一些拍摄Mocap的建议？

Yasui：首先，我们在进入现场之前花了足够的时间做准备。由于运动将实时传输，我们在设备选择和系统验证方面做了大量工作，以便在流数据传输时做到没有延迟。

在现场，作用点会被变为一个一个的剪辑。对于每个剪辑，我们会选择一个位置和方向，以便mocap演员可以检查视角和位置。由于系统基础上有大量的移动，因此系统被设置为在推车上快速移动和部署。由于在运动中有许多战斗场景，因此我们对bodypack和电池的位置进行了重新安排。bodypack和电池被转移到胸侧位置，以减轻摔倒时的负担，并支持上半身轻松移动。由于胸侧没有口袋，演员必须佩戴额外的背带。

你们现场拍摄的实时合成管道是什么？

Yamada：我们将运动捕捉数据发送到MotionBuilder进行最后的处理，然后发送到Unity。在Unity中我们创建灯光，阴影和后期处理，控制可移动设备的动画，添加对其他小物件的控制，链接实景相机和Unity摄像机的移动等工作。为了加快这方面的运作，我们开发并使用了一个专门的内部拍摄工具。在Unity中创建的图片被发送到Ultimatte，并与真人视频和色度键实时合成。当然我们也调整了白平衡等参数。所以在合成后并不存在不一致性。最后，我们使用了Ki Pro记录合成后的图片和每个合成前的图片和遮罩。

您能告诉我们在重定CG角色模型后你们的工作有什么改变吗？

Yamada：由于模型的形状与真实的人体骨骼非常不同，因此演员的动作会受到限制。为了做那些由于骨骼问题而不能做的姿势，我们也做了一些事情，比如在MotionBuilder中对动作进行修正。

能告诉我们您的专业领域吗？

Yasui：我们专注于各种应用领域的运动捕捉工程。用于视频制作和角色现场的动作捕捉。此外我们还涉及到很多领域，比如运动工程，传统表演艺术等。最近，我们一直专注于使用虚幻引擎的虚拟现场制作，我们正在使用动作捕捉和照明系统进行制作。

Yamada：这是一个创造性的过程，需要解决问题的能力。我们将把我们追求的理想具体化，而不仅仅是完成项目。建模和设置、近年来的虚拟制作、实时图形工作流（如使用元宇宙和游戏引擎的视频制作）以及各种概念仍在构建中。我擅于开拓未来。

在其他拍摄项目中，Xsens还能在哪些领域得到应用？

Yasui：我觉得Xsens可以用在任何结合真人和CG角色的视频作品中。我们相信，在片场与其他mocap演员同时录制动作可以缩短制作周期，并使CG角色更加生动。

Yamada：我认为Xsens MVN最大的优势是它允许我们使用影视拍摄地现场进行拍摄，正如我们在《暴太郎战队Donbrothers》中做的那样。这是光学动作捕捉系统系统很难做到的。我认为将来我们会有很多机会用到Xsens MVN。Xsens MVN的优点和光学动作捕捉系统的优点是不一样的，所以在以后的虚拟制作拍摄中，我们会根据具体情况做出最优的决定。