Omniverse NuRec：复用行驶数据，为新车型生成感知训练视角

报道讲了什么

• NVIDIA 发布 Omniverse NuRec，利用 3D 高斯泼溅从真实驾驶数据重建场景，并渲染新相机视角。
• NuRec 支持新视角合成，可更改相机外参、内参、视场角和镜头模型。
• 重建场景保留原始轨迹、标定、动态物体轨迹和地图数据，可用于标签适配。

可以做什么

• 从现有驾驶数据渲染目标车型相机视角，支持不同位置、朝向、分辨率和镜头模型。
• 使用 NVIDIA Harmonizer 后处理模型修复神经渲染中的伪影，提升视觉质量。
• 通过 agent skills 自动化下载、渲染和修复步骤。

怎么使用

1. 从 Hugging Face 下载一个重建场景（USDZ），需接受许可并使用 token 认证。
2. 使用 NuRec 容器导出目标相机轨迹并渲染，先稀疏渲染验证，再全序列渲染。
3. 使用 Harmonizer 对渲染帧进行后处理，修复伪影。

结果与限制

• 相机放置在观测轨迹之外或朝向源相机覆盖有限的区域可能产生低质量渲染。
• Harmonizer 不能修复错误的标定、恢复未重建的场景覆盖或替代目标相机验证。
• 训练前需验证输出，并像真实数据一样处理。

使用入口与依据