个人团队使用Xsens创作具有好莱坞风格的音乐视频

2022-11-18 16:29:05 关典

个人团队使用Xsens创作具有好莱坞风格的音乐视频

在过去的几年里,数字化迅速兴起,高端的“好莱坞风格”制作技术取得了重大进步。这些发展为娱乐行业的公司与独立工作室提供了大量机会,使他们能够在提升效率、节省成本和资源方面取得更大进步。

这种“好莱坞风格”的制作技术先进、便携且直观,一个经验丰富的单独内容制作人,使用正确的工具,就可以制作出消费级内容,无需完整制作团队就能完成相同质量的视频项目。

通过结合游戏行业的专业知识、视觉效果和高级运动跟踪技术,身临其境的娱乐体验在未来的潜力似乎是无限的。也可以理解为如果我们能想到,就很有可能最终能够实现。

挑战

Area of Effect(AOE)是一家全栈视觉效果和虚拟制作工作室,专注于创新的可视化解决方案。最近,RCA唱片公司和Bad Robot合资的唱片公司Loud Robot找到了AOE为其制作全新的音乐视频(MV)项目。

该项目要求为Sally Boy的新单曲《i Love U》制作一部MV,该项目面临着一个独特的挑战:一个拥有足够技术能力的普通人能否借助尖端的现代工具,如MVN Animate,Faceware,以及虚幻引擎独自完成制作一部MV。

iloveu 3.png

深入探索

AOE的实时VFX助理布莱斯·科恩(Bryce Cohen)接到的任务是探索如何一个人在虚幻引擎中创作一部MV,这包含从最初的概念阶段到最终的编辑和制作的整个制作流程。这个项目让他有机会利用好莱坞式的尖端技术展示自己的能力。

该项目的第一阶段是探索需要使用什么技术来创建预期的最终结果。例如,视频将基于一个虚拟角色进行制作,这个角色的语言表达需要通过嘴部动作来做出反应,所以面部跟踪是必须的。另外这个角色还会经常移动,所以需要摄像机跟踪。最后,科恩决定使用目前所有可用的技术,通过动作捕捉来进一步拓展该项目的可能性。

“当我第一次接触该项目时,我对整个项目感到紧张,因为它除了变量巨大什么都没有,”科恩说。“通过利用改进的尖端技术,如mocap,具有适当技术能力的创意人员将进入一个全新的虚拟生产世界。”

灯光、摄像机准备,开拍!

项目中使用的许多技术对科恩来说都是全新的,他只有几个小时来熟悉如何使用它们。

科恩说:“动捕技术对用户来说非常直观明了,有了网上的教程,你可以在工作室里自行学习。”

“这个项目的制作过程充满了各种小惊喜。其中我最喜欢的是试图创造出蝴蝶飞舞的动画,这会为场景带来更多的生命感。至于最后的解决办法?我决定在导演杰克·扎欧提斯(Jake Zaoutis)的头上绑上摄像机追踪器,让他在我的车库里跑来跑去,就像一只真正的蝴蝶一样!”

“让整个项目成为可能的尖端技术的关键部分是Xsens动捕套装。它帮助我们得到了视频镜头的实时参考,以实现超快速的制作流程”科恩说。

“Xsens Animate 套装能够提供精确的生产级别的结果,这类似于光学动捕系统能够提供的结果。这种突破边界的技术可以为我们在工作室内外提供干净、可用的生产数据。我们发现收集真实可靠的数据对视频制作的成功至关重要。”科恩说道,“就这套服装本身的结构而言,还有另一个好处。我们不必担心会弄坏这套衣服,也不必担心它会限制动作的正常表现——有时,你会忘记自己还穿着它!”

iloveu 4.png

变不可能为可能

在科恩看来,此次项目有两个主要的挑战需要克服。第一个是软件问题,第二个则是更普遍的问题,关于“如何工作”。

对于软件问题,科恩需要为角色建立一个定制的面部装备。这是一个非常困难的过程,需要反复试验才能做好,但是在实践中的不断探索并使用上这个全新工具之后,这个过程变得容易起来。

对于“如何工作”的挑战,主要问题是将扎欧提斯的创意方向转化为行动、过程和结果,扎欧提斯以前从未在虚幻引擎这样的环境中工作过。科恩发现他不仅要负责解决问题,还要负责解释这个想法是否可行背后的原因,而主要挑战来自于时间限制和资源投入。

最终视频中有许多场景如果没有使用mocap,尤其是Xsens套装,是不可能制作出来的。例如,当角色在街上跑步时,需要图形和动作尽可能逼真,团队不可能将编辑好的跑步动作作为跑步动画循环播放,当然也没有跑步机进行配置。使用无标记点的mocap不太可能做到这一点,因为摄像机的视野太宽,而且没有其他合适的替代方案。

凭借Xsens技术的直观性,科恩拥有了更多的控制性和可定制性,这让整个项目感觉更像是在真实生产一样。最终的结果是录制的动作能够被应用为制作视频所需的精确镜头,而自动生成的部分也不会丢失真实性。

“当你试图在数字空间中创造真实的东西时,你需要在那个空间中投入真实的东西。正是这种不完美和快乐的意外让事情变得更加真实。”科恩解释道。

就准备工作而言,Sally Boy这个角色的背后并没有专业的艺术家制作参与。只有我们穿上Xsens套装,录制了超过100种不同的身体动作。并将这些动作应用到Sally Boy身上。

最终的成品MV是Sally Boy艺术的延伸,是MV中情感的表现,而不仅仅是一份营销材料。

这项技术将有可能弥合游戏和电影行业之间的差距。正如科恩所说“有了Xsens,即使是一个人工作也可以制作出一些真正令人兴奋的东西。”

关于AOE

Area of Effects是一个全栈视觉效果和虚拟制作工作室,专门为故事片、电视和商业领域制作和提供创新的可视化解决方案。

Area of Effects的奥斯卡获奖团队位于洛杉矶、新奥尔良和檀香山,旨在改变内容创作者对整个前期和后期制作过程的思考方式。为了实现和推动其创意和技术目标,Area of Effects与电影、电视和游戏领域的一些知名人士合作,如多次获得奥斯卡奖的VFX监制Rob Legato。

电话
产品
方案
案例