Bringing the Real World Into Simulation for Physical AI

3D重建是物理AI新时代的基础，能够将现实世界融入模拟中。通过传感器输入，生成高保真度的3D模拟数据，支持工厂组装、自动驾驶等应用。使用Omniverse Nurrek生成交互式3D模拟，结合高斯方法、光线追踪和生成AI技术，提升渲染质量。新开发的3D GU无迹变换技术解决了传统高斯方法的局限性，支持多种相机模型。通过Isaac Sim和Isaac Lab等引擎，利用生成的数据进行机器人训练和测试，实现高效的环境重建和机器人政策优化。