了解开发者如何将 AI 智能体与 NVIDIA Omniverse 库相结合,以构建仿真应用、测试物理行为并指导改进。

「链接」

将仿真构想转化为可运行的应用,意味着需要完成资产装配、物理模拟与渲染连接,并验证场景是否按预期运行。开发者正将前沿 AI 模型与 NVIDIA Omniverse 库相结合,助力完成上述工作 —— 构建用于探索不同场景、排查故障和改进设计的应用。

开发者通过自然语言指令引导 AI 智能体,审核其生成结果并指导调整。Omniverse 库提供 GPU 加速的物理模拟、渲染和传感器仿真功能。

构建面向仓库场景的人形机器人仿真器

在将仓库任务自动化之前,开发者需要借助交互式仿真环境来探索任务行为,并评估具体作业流程。NVIDIA Omniverse 产品经理 Frank DeLise 基于 Astra,将 SimReady 仓库与人形机器人转化为支持第一人称和第三人称视角的交互式仿真器。

连接辅助驾驶测试工作流

场景、传感器或驾驶模型的变化,都可能对辅助驾驶汽车仿真产生显著影响。NVIDIA 仿真技术团队经理 Doyub Kim 委托 Astra 构建了 Zero to Alpamayo,一个以旧金山市场街道为基础的可复用仿真环境。

利用传感器差异创建并改进数字孪生

为测试机器人和辅助驾驶汽车,开发者需要了解仿真传感器与真实传感器的匹配程度。负责 NVIDIA RTX 传感器验证工作的 Ashley Reid 指导 Astra 智能体,将 ovrtx 摄像头输出和原始激光雷达输出与记录数据进行对比。这些智能体从零构建了两个数字孪生,并改进了另外两个现有数字孪生。

以上为摘要内容,请点击链接阅读完整内容:洞悉 Omniverse:开发者如何借助前沿 AI 智能体将创意转化为仿真 | NVIDIA 英伟达博客