返回行业情报
fxguide·

高斯泼溅技术实现影视级人群特效

Union VFX on production-ready Gaussian splat crowds

Union VFX与Clear Angle Studios合作,利用40台机器学习相机构建的体积捕捉系统,将真人表演转化为可重打光的4D高斯泼溅模型。该技术解决了传统高斯泼溅在时间稳定性、分割、遮罩和重打光方面的挑战,使数字人群可在近景镜头中保持真实感,并支持逐镜头艺术指导。

深度解读

Union VFX 与 Clear Angle Studios 合作,将高斯泼溅从可视化技术改造为可用于故事片制作的、可重光照、可合成、可实例化的4D人群解决方案,这可能是目前最接近“生产就绪”的泼溅管线。

核心突破:从“好看”到“可控”

高斯泼溅(Gaussian Splatting)因其照片级真实感而备受赞誉,但长期以来被视作VFX领域的“坏孩子”——它缺乏传统CG资产的关键控制属性:时间稳定性、分层遮罩(Matte)、可重光照(Relighting)和阴影投射。Union VFX的技术主管David Schneider在fxpodcast中详细解释了他们的管线如何解决这些痛点。他们与Clear Angle Studios合作,使用其全新的 体积捕捉装置(VCR) ,这是一个由 40台同步机器学习相机 组成的半圆穹顶,配合集成LED照明,在高度可控的中性光条件下捕捉表演者。从这些捕捉数据中,Union能够生成 动画4D高斯泼溅,保留摄影写实感,同时可部署到传统VFX管线中。

关键判断:Union的突破不在于捕捉质量本身,而在于他们构建了一套让泼溅资产像传统CG资产一样被“导演”的管线。

技术细节:如何驯服“泼溅”

Schneider解释了这套管线的具体工作流程。核心在于 基于机器学习的图像分割:系统能够识别并隔离出衬衫、夹克、裤子、头发和皮肤等不同区域。这些区域随后被转化为 Cryptomattes,这是合成师最熟悉的控制方式。这意味着,一个由真实人类表演捕捉生成的人群,合成师依然可以像处理传统CG一样,对单个角色的服装颜色、画面平衡进行逐镜头调整,并有效防止重复感。

对于重光照,Union的管线允许泼溅资产在CG场景中接收 生产级灯光,并能够投射和接收阴影。这解决了泼溅技术最致命的缺陷——一旦灯光或摄像机角度变化,原本逼真的泼溅就会“露馅”。现在,合成师可以像处理传统CG资产一样对待它们。

对行业的影响:人群镜头的范式转移

### 距离不再是限制

传统CG人群解决方案通常被限制在远景或背景层,因为近景会暴露模型精度和动画机械感。卡牌人群(Card-based crowds)虽然高效,但在摄像机运动或灯光变化时迅速失效。Union的测试表明,他们的泼溅角色可以承受 接近四分之三屏幕高度 的镜头,在正确重光照下,其表现力远超传统CG人群方案。

这对视效总监意味着什么?他们不再需要将人群镜头隐藏在烟雾、大气、前景群演或摄影卡牌层之后。这打开了全新的创作可能性——例如体育场全景、战场冲锋、演唱会狂欢等需要大量真实人类表演但预算有限的场景。

### 交互式群体捕捉

Union不仅捕捉单个表演者,还能捕捉 小群体互动——欢呼、跳舞、推搡、大笑。这些交互式群体捕捉可以被“撒”进更大的人群中,避免数字人群系统常见的机械感。Schneider还描述了一个测试:一名骑自行车的人在静态滚轮上被捕捉,然后被放置在一个CG环境中以高速移动。同样的逻辑可以应用于飞行超级英雄、威亚动作、特技表演等场景——当制作不需要完全传统的数字替身,但仍需要高度逼真、可控、可重光照的人类表演时,这套方案提供了中间地带。

与生成式AI的对比:确定性压倒一切

Schneider明确指出了这套工作流与生成式AI的根本区别。生成式AI可以生成令人印象深刻的短视频片段,但在导演控制、重复性、时长扩展和精确控制方面存在巨大困难。而Union的泼溅工作流基于 真实捕捉表演确定性处理。导演和视效总监可以做出具体决策:人物去哪里、如何行动、如何打光、如何变化。

在生产制作中,控制就是一切。

管线集成:Nuke与USD的落地

Union开发了一套基于 Nuke 的快速编辑周转流程。捕捉后,Clear Angle可以从捕捉装置交付类似精灵图(sprite-like)的视图,Union通过 USD工作流 将其放入进行中的CG环境。这使得总监和导演可以在早期阶段,使用与最终泼溅捕捉直接对应的元素进行布局和行为决策。一旦批准,这些元数据可以传递到下游进行完整处理。

所以呢?对从业者的启示

1. 对于视效总监和制片人:这套方案提供了一个可量化的成本-质量平衡点。对于需要大量人群的中远景镜头,它可能比传统CG人群更便宜、更快、更真实。关键在于,它不需要建模、绑定、动画代理系统,而是直接使用真实表演。 2. 对于合成师:Cryptomattes和可重光照意味着你的工作流不会因为引入泼溅而改变。你依然可以调色、调整对比度、添加特效。这降低了技术门槛。 3. 对于技术开发人员:Union的案例表明,泼溅技术的未来不在于更炫酷的渲染算法,而在于 工程化——如何将不稳定的点云数据转化为可预测、可控制、可集成的资产。时间稳定性、分割精度、重光照质量是下一个竞争焦点。 4. 对于整个行业:这可能是数字人类和人群工作流的一个转折点。当捕捉成本持续下降(Clear Angle的VCR系统尚未公布价格,但40台ML相机的配置远低于传统动捕棚),而控制精度持续上升时,我们可能会看到“表演捕捉+泼溅”成为中低预算制作的标配,而传统全CG数字替身将退守到需要极端特写或非人类形态的场景。

Union VFX和Clear Angle Studios正在证明,高斯泼溅不是实验室里的新奇玩意,而是一个可以被工程化、可控制、可投入生产的电影级工具。对于任何正在为人群镜头头疼的制作团队,这值得认真关注。

影视特效高斯泼溅人群特效体积捕捉虚拟制作VFX管线