高斯泼溅人群：电影级VFX新方案
从可视化到生产级资产：高斯泼溅的进化
高斯泼溅（Gaussian splatting）最初作为新颖的三维可视化技术进入行业视野，凭借其从多视角图像重建细腻场景的能力迅速走红。然而，在影视制作中，它长期面临一个核心矛盾：视觉上令人惊叹，但缺乏生产管线所需的可控性。Union VFX与Clear Angle Studios的最新合作正在改变这一局面——他们开发了一套完整的端到端工作流，将高斯泼溅从“好看的实验品”升级为“可部署的CG人群解决方案”。
核心硬件：VCR体积捕捉系统
这套工作流的基石是Clear Angle Studios设计的VCR（Volumetric Capture Rig）。该设备采用半穹顶结构，部署了40台同步机器学习相机，并集成了LED照明系统，能够在高度可控的中性光照条件下捕捉表演者。相比传统多相机阵列，VCR的关键优势在于：
- 光照一致性：内置LED提供均匀、中性的照明，消除环境光干扰，为后续重新照明（relighting）打下基础。
- 机器学习对齐：40台相机通过ML算法实现像素级同步，确保每帧的空间精度。
- 捕捉体积：约三米见方的捕捉空间，足以容纳单人或多人的基本动作。
从这些捕捉数据中，Union能够生成4D高斯泼溅——即随时间变化的三维泼溅序列，保留表演者的真实动作和摄影写实感。
技术突破：让泼溅“听话”
高斯泼溅的写实感毋庸置疑，但传统泼溅在影视管线中面临四大难题：
- 时间稳定性：连续帧间的泼溅点容易抖动或闪烁。
- 分割与遮罩：无法像传统CG资产那样分离角色与背景或角色内部元素。
- 重新照明：泼溅的“颜色”是固定的，难以融入不同光照的CG场景。
- 阴影交互：无法投射或接收阴影，导致合成时“漂浮感”明显。
Union的管线逐一攻克了这些问题。首先，他们通过机器学习图像分割技术，将捕捉到的表演者分解为衬衫、夹克、裤子、头发、皮肤等独立区域。这些区域被转化为Cryptomatte——合成师熟悉的元数据格式，允许在后期中单独调整颜色、亮度，甚至替换纹理。这意味着：
- 合成师可以像处理传统CG角色一样，为不同人群成员调整服装颜色，避免重复感。
- 角色可以接受场景中的生产级灯光，并产生真实的阴影交互。
- 泼溅资产被当作“带摄像机的CG模型”处理，而非静态图片。
人群场景的新范式
传统CG人群需要建模、绑定、动画、代理系统以及大量变体工作，成本高昂且容易显得机械。卡片式人群（billboard crowds）虽然高效，但一旦摄像机移动或光照变化，就会暴露平面感。Union的方案填补了二者之间的空白：
- 真实表演驱动：直接捕捉真人动作，避免了动画师手动调整的“重复感”和“机械感”。
- 实例化部署：将处理好的泼溅角色实例化到大规模环境中，支持数百甚至数千个独立个体。
- 逐镜头艺术指导：每个镜头都可以单独调整角色的光照、颜色和阴影，满足导演对特定氛围的要求。
更令人惊讶的是这些泼溅角色的可用距离。Union测试表明，在正确的重新照明下，角色可以接近至四分之三屏幕高度而保持视觉可信度。对于习惯于将人群藏在背景虚化、烟雾或前景演员身后的视效总监来说，这打开了全新的创作可能性——观众可以清晰地看到人群中的个体，而无需担心CG感或卡片感。
与传统管线的融合
Union强调，这套工作流并非要取代传统CG人群，而是作为补充。在实际制作中，泼溅角色可以与传统CG角色混合使用：近景使用精细的CG模型，中远景使用泼溅角色，背景使用卡片。但泼溅角色的优势在于，它提供了比卡片更真实的运动细节和光照响应，同时比全CG人群更经济高效。
此外，由于泼溅资产以标准格式输出，它们可以无缝接入现有的VFX管线——合成师在Nuke中操作Cryptomatte，灯光师在Maya或Houdini中调整光照，渲染器（如RenderMan或Arnold）直接处理泼溅点的阴影计算。这种兼容性降低了技术门槛，使团队能快速采用。
未来展望
目前，Union与Clear Angle正在进一步优化捕捉速度和分辨率，并探索将泼溅技术应用于数字替身、虚拟制片和实时渲染场景。随着硬件成本下降和ML算法效率提升，高斯泼溅人群有望在未来的影视制作中成为标准工具之一。
对于从业者而言，这意味着需要重新思考“写实”的定义——当真实表演可以被直接捕捉并部署为可控制的三维资产时，传统CG的建模-绑定-动画流程是否仍然是唯一选择？至少，高斯泼溅提供了一个令人兴奋的替代路径。
