通过虚拟制片捕捉奇迪亚城的刺激与激情

科技   2024-11-04 11:58   上海  

奇迪亚城(https://qiddiya.com)以引人遐想的图维克山脉为背景,是沙特阿拉伯最引人注目的大型项目之一。这座庞大的娱乐城由25个区域组成,占地376平方公里,将拥有中东最大的主题公园和一条新的世界级赛车道,以及艺术中心、高尔夫球场、酒店、音乐会场馆等设施。

“宏大”并不足以形容这个项目的规模。

展示奇迪亚城广度的任务落到了Journey(https://journey.world)旗下工作室Squint/Opera的身上,不仅如此,他们还要讲述这座城市的故事。

该团队使用基于虚幻引擎的虚拟制片技术和实时可视化,通过制作一系列影片,提高了人们对这座城市的认识,并宣传了它的方方面面。

通过对他们的采访,我们深入了解了在这个规模和复杂程度全球数一数二的项目中,他们积累了哪些工作经验,以及如何使用实时技术建立更顺利、更流畅的影片制作流程。

你好!请介绍一下自己,你叫什么名字,在Journey担任什么职位,有怎样的技术背景?
我是Joseph Yong,Journey的首席虚幻开发者。作为一名开发者、技术美术师和3D全面型技术人员,我使用虚幻引擎已经有12到13年的时间了。五年前,我加入了Journey,并承担了从零开始组建虚幻团队的任务。
Journey的一些工作室已经运营了超过20年。你们最初开始使用虚幻引擎的方式、原因和时间是什么?
Journey在2019年开始使用虚幻引擎,但随着虚幻引擎的发展,我们也逐步完善和扩大了使用范围。我们最初将它用于项目提案展示,也会使用它的VR功能在内部与我们的创意团队一起探索空间。

随后,建筑行业发生了转变,每个人都希望转向实时设计工具,尤其是希望利用它生成渲染的能力。虚幻引擎是一个明智的选择,它可以在项目设计不断完善的过程中提供快速渲染和出色的视觉效果。

从更广泛的角度说,游戏引擎更快的迭代时间和交互特性使我们能够与客户及团队内部进行更高效的沟通。
2022年,虚幻引擎5推出后,我们得以进一步扩展,使用它创建数字内容。现在,我们在博物馆工作中使用它预览大规模和特定环境中的媒体(尤其是投射到不规则屏幕或映射到弯曲墙面上的媒体)。光看电脑屏幕是无法真正了解这种视觉效果的。

此外,我们一直在构建自己的虚幻工具和插件库,以便在所有项目中快速部署(例如PCG人群生成插件)。这有助于我们在快节奏的行业中茁壮成长。

能否介绍一下你们为奇迪亚城制作的影片?这项工作包括哪些内容,耗时多久,这些影片将用于什么目的?

奇迪亚城的营销团队正在系列营销活动中使用这些影片,以建立知名度,并推广城市中从先锋体育场到动漫村等多个令人兴奋的区域。通过虚拟制片技术,Journey能够完整展示这片占地360平方公里的世界级体育和娱乐胜地,包括其中为一级方程式赛车准备的赛道、北美以外的第一座六旗主题公园,以及备受瞩目的文化与艺术中心。

影片还强调了奇迪亚的标志性景点如何与城市交融,创造出一个融合、模糊和增强了现实的多维度娱乐区。
其中一部影片展示了一条未来感十足的赛车跑道,它将穿过奇迪亚的中心地带。影片通过快速的剪辑和活跃的节奏,跟随赛车飞速绕过赛道,经过过山车和玻璃底泳池等景点。
该作品是在虚幻引擎中完成的,其结构与通常的视频制作类似,包括:叙事、前期制作、线性制作、剪辑、音效和调色。然而,由于是虚拟制片(VP),我们可以不再使用笨重的绿幕,而是为奇迪亚城制作超现实的虚拟背景。虚幻引擎的虚拟制片技术(https://dev.epicgames.com/community/learning/paths/XRe/unreal-engine-virtual-production-visualization-guide)为我们带来了三维虚拟空间,向演员、工作人员和观众提供了无与伦比的沉浸感。
影片从开始到结束,从最初的叙事到完成多个版本,大约花了四个月时间。这听起来似乎很漫长,但归功于虚幻引擎的通宵渲染,进度实际上大大加快了。在使用虚幻引擎之前,渲染需要花费一个周末甚至更长时间。现在,我们可以在一夜之间重新渲染一个镜头,它具有完整的纹理和所有精美细节,让我们可以更快地看到最终像素。
项目的必备条件是什么,例如,至关重要的是实现逼真度还是传达项目的规模,虚幻引擎是如何帮助你们实现这些目标的?
首先,我们需要让这个项目激动人心。从赛车在赛道上飞驰的速度,到震动的音乐,影片需要传达奇迪亚城赛车道的活力与喧嚣。这对我们来说是一个很好的转变,因为我们许多项目都涉及缓慢平移的镜头和精心设计的摄影。而这次的项目必须充满动作感,以展示奇迪亚的总体规划,即一个充满乐趣、活力四射、灯火辉煌、激动人心的地方。

为了达到这种效果,我们采用了虚拟制片技术。虚拟制片通常涉及称为“LED摄影棚”的大型三维LED舞台,可以实时投影真实环境的“虚拟孪生”背景。摄像机会跟踪背景的移动,为拍摄的画面添加真实的深度和令人信服的动态效果。虚拟制片消除了对多层视觉特效(VFX)和后期制作的需求,使演员无需离开摄影棚就能“身临其境”。

虚拟制片还使我们能够快速看到我们所渲染内容的细节,这一点至关重要。如果以传统方式拍摄,就很难在合理的时间范围内对这些镜头进行预演,并向客户传达愿景。但通过在虚幻引擎中进行虚拟制片,我们可以实时看到一切,并在拍摄过程中进行调整。这让我们可以亲手操作我们正在创造的东西,无需等待电脑渲染。
比起使用其他游戏引擎或选择离线渲染,在虚幻引擎中制作这些影片为什么更具可行性?

在过去五年里,虚幻引擎凭借其效率,已成为我们的核心工具。虽然在某些情况下,离线渲染可能仍然具有视觉优势,但它在周转时间上无法与虚幻引擎相提并论。

在我们的行业中,项目周期通常为两到三个月,而不是几年,因此从故事板到最终像素,我们需要非常高效地完成整个过程,并围绕每个阶段推进讨论。我们越能快速地得到渲染得当的镜头,来表达我们想要传达的完整情感点,我们就能越快收到客户反馈并进行迭代。如果重新渲染一个镜头不需要两周时间,我们就可以在更短的时间内变得更加灵活和富有创造性。
虚幻引擎还使我们能够随时使用虚拟制片,这也是另一个节省时间的方法。它可以让我们进行大量的前期规划和技术预演,从而限制在后期合成中花费的时间。简而言之,如果没有虚幻引擎,我们就不可能交付让我们闻名的那些项目。
请谈谈你们在制作影片时所依赖的虚幻引擎功能,以及它们带来的优势。
很难单独挑出某个方面的特定功能,因为我们基本上使用了虚幻引擎中的所有功能。话虽如此,某些功能对于我们的核心工作来说是不可或缺的。
  • Lumen可以让我们在场景中加入实时全局光照和反射,使光照看起来真实可信。 
  • 世界分区通过数据层为我们提供了规模极大的地图,并且可以只在需要时加载特定部分。 
  • Nanite让我们可以在游戏引擎中使用具有像素级细节的电影级模型。如果没有Nanite,我们就无法制作出这些镜头。 
  • 程序化内容生成(PCG)让我们可以构建任何复杂度的迭代工具和内容。我们就是通过它,快速地自动填充了满是树木的森林(以及许多其他资产)。
  • 影片渲染队列让我们能够拍摄极高分辨率的镜头,并在后期制作中使用额外的通道进行渲染。
但实际上,Journey在幕后使用了虚幻引擎5中的所有功能。
在实施这个项目时,你们面临的最大挑战是什么?你们又是如何克服的?

因为它代表了整座城市,而奇迪亚的总体规划规模巨大。仅这一点就带来了技术上的挑战。如果总体规划中的所有内容同时加载,就无法在场景中移动:数据量如此之大,将使浏览过程变得缓慢并且难以操作。幸好,虚幻引擎的世界分区功能让我们能够按需加载和卸载内容,而不会破坏场景。

另一项挑战是可信度。我们无法在一个还不存在的赛道上拍摄赛车,但是我们可以在工作室中拍摄。为了让它看起来尽可能接近真实,我们将实拍的真实道具(如赛车和过山车)与虚拟制片相结合。然后,我们必须考虑一些微小的细节,比如驾驶员头盔面罩上的反光,这些反光会随着他在赛道上的飞驰而发生变化。如果使用CGI技术,这些反光就会显得虚假,而且合成它们也会花费太多时间。虚幻引擎的Lumen功能为我们提供了所需的环境光和反射,使场景在视觉上更加真实可信。

最终,我们在细节丰富、充满动感的画面中描绘了奇迪亚的总体规划,以开创性的方式将它的概念栩栩如生地展现出来。在发布后的一小时内,它就成为了沙特阿拉伯X平台上的热门话题,并产生了超过650篇媒体报道和3.63亿次社交媒体曝光。

与传统的影片制作方法相比,实时技术如何改变工作流程?

实时技术可以帮助我们协调创意团队和前期制作团队。因此我们可以快速审阅总体规划,寻找角度,将镜头连接起来,从而定义讲述方式,并查看哪些镜头有效。这大幅节省了时间,并有助于我们快速迭代项目。(我们甚至向客户发送了拍摄的现场直播,这样他们就能在我们捕捉镜头时向我们提供反馈。)

除此之外,通过实时技术,我们还可以按顺序拍摄镜头,让故事板显得合理,但如果需要,也可以偏离顺序。如果有人无法参加某个镜头的拍摄,我们可以在等待的同时,通过更改背景拍摄不同的镜头。同样,如果我们需要拍摄一个黄金时段的镜头,我们可以将黄金时段延长至五小时。使用这项技术,我们可以在拍摄日灵活应变,并始终能够获得所需的确切镜头。
能否谈谈你们是如何在山顶缆车项目中使用虚幻引擎的,具体是哪些功能帮助你们完成了这个项目?

山顶缆车是香港的主要旅游景点之一,也是亚洲最早的缆车,我们在这个项目中首次使用虚幻引擎(而非离线渲染)进行线性影片的拍摄。为了吸引该景点每年约400万的游客,并为他们提供知识,Journey为新改造的缆车创造了从山脚到太平山顶的沉浸式体验。

要制作山顶缆车的游客体验沉浸式装置,我们需要为三个同步屏幕制作八分钟的渲染,而且这必须是一个连续镜头。从开始到结束共有14000帧。如果使用传统渲染工具,我们根本无法完成。
屏幕尺寸是另一项挑战。它有十米长,三到四米高,还有一块横跨天花板的屏幕和一块后墙屏幕。在等候区域,有100人同时在场,我们必须确保每个人都能从站立的位置看到赏心悦目的内容。这是一项艰巨的任务。

在虚幻引擎中工作的优势在于,我们能够尽可能地接近最终像素。在编辑器中工作时,我们可以随时看到99%的镜头,并且每个观看屏幕的人都能看到相同的上下文环境。这一点尤为重要,因为项目是在疫情期间进行的。我们必须远程完成所有工作,确保在香港的客户仍然能够理解我们的构想,并评估是否达到了他们想要的效果。

然后,在制作山顶缆车项目期间,虚幻引擎5问世了。突然间,光照效果和渲染支持都变得更好了,我们可以做更多事情。通常,我们不会在项目中途更换引擎,这要冒很大风险,但虚幻引擎5在视觉质量上带来了飞跃,这是毋庸置疑的。
尽管我们已经制作了很多交互式媒体,但使用虚幻引擎仍是向前迈进了一大步。我们的团队必须学习如何在游戏引擎(而不是传统的渲染器)中进行渲染,但这产生了巨大的益处。如果不这样做,我们根本无法理解屏幕的比例,也无法平衡构图。

与你们使用虚幻引擎完成的其他工作相比,在巴特西发电站项目中使用虚幻引擎有哪些不同,产生了哪些益处?

作为创意人员,我们的工作就是以最引人入胜的方式为客户讲述他们的故事,在博物馆和文化场所尤其如此。如果受众范围很广,内容既要吸引8岁的孩子,也要吸引78岁的参观者,这一点就尤为重要。

考虑到这一点,巴特西发电站的Lift 109体验在传达文化遗址信息的常规方式上进行了创新。我们在一个交互式触摸屏上使用了虚幻引擎,用户可以将煤炭移动到涡轮机中,为一个巨大的实体吊灯供电。虽然概念很简单,但它以一种有趣且易于理解的方式向游客展示了涡轮机的工作原理,同时也补充了关于该遗址的更广泛文化故事。
你们如何看待数字媒体与物理现实融合的未来趋势?游戏引擎技术在这个领域带来了哪些令人兴奋的机会?
在博物馆和文化空间中,我们将不断提高视觉质量。随着渲染器的改进,我们将越来越多地使用互动元素。随着虚幻引擎的持续发展,我们能够提供的质量将越来越好。
在建筑和施工领域,我们的重点正转向数字孪生。这些孪生模型使我们能够为一个地点或未来地点创建视觉展示,并增加额外的层,帮助实现交通模式或能源消耗等数据的可视化。这是一种促进重要对话的方式,可以帮助人们正确地述说他们正在建设的项目,也是我们Journey所做工作的重要组成部分。
我们知道,随着游戏引擎技术的发展,我们还能实现更多目标。由于Journey有意地在内部维护所有工具和技术栈,我们可以将重大技术突破带到每一个新项目中。这让我们能够集中精力发挥创意,交付最前沿的项目。
游戏引擎不断发展,我们对它们的发展方向感到兴奋。我们现在站在行业的最前沿,期待着这个行业变得更广阔。
近期焦点
Epic全新一站式内容商城Fab今日上线!
Epic for Indies现已登陆Epic开发者社区
虚幻引擎里你可能不知道的功能 | UnrealFest演讲精粹
使用简单的通用材质来提高UI性能 | UnrealFest演讲精粹
Motion Blur用UE5为《黑色国度》带来逼真视觉效果

扫描下方二维码,关注后点击菜单栏按钮“更多内容”并选择“联系我们”获得更多虚幻引擎的授权合作方式和技术支持

长按屏幕选择“识别二维码”关注虚幻引擎

“虚幻引擎”微信公众账号是Epic Games旗下Unreal Engine的中文官方微信频道,在这里我们与大家一起分享关于虚幻引擎的开发经验与最新活动。

虚幻引擎
Epic Games 旗下 Unreal Engine 虚幻引擎官方订阅号
 最新文章