NVIDIA 带来知乎精彩问答甄选系列，将为您精选知乎上有关 NVIDIA 产品的精彩问答。
本期为问答甄选第二十三期 —— 查看 AI 助推机器人开发相关精彩问答
以下两个知乎甄选问答将为您了解 AI 助推机器人开发相关内容带来更加精彩的解答！
Q：目前全球工业机器人技术发展到了什么程度？
A：
NVIDIA 在机器人装配方面使得超实时仿真成为可能。这种高速仿真能够使用强大、先进的强化学习（RL）技术。借助 RL，虚拟机器人能够探索仿真环境、获得丰富的经验，并通过智能试错来学习有用的技能。将 RL 用于机器人装配，可以最大限度地减少对操作者专业知识的需求、增加对变化的鲁棒性并减少硬件磨损。
为了将强化学习用于具有挑战性的装配任务并解决现实差距问题，NVIDIA 开发了 IndustReal。IndustReal 是一套用于帮助机器人解决仿真中的装配任务，并将这些能力转移到现实世界的算法、系统和工具。
IndustReal 主要提供：
- 一套使仿真机器人通过 RL 解决复杂装配任务的算法。
- 一种解决现实差距，并在现实世界中部署时稳定机器人所学技能的方法。
- 一个现实世界机器人系统，将在仿真中训练的装配技能端到端地转移到现实。
- 使研究人员和工程师能够复制该系统的软硬件工具套件。
- IndustRealKit 是一套受 NIST Task Board 1（既定的机器人装配基准）启发的 3D 可打印资产 CAD 模型。
- IndustRealLib 是一个轻量级的 Python 库，可将在 NVIDIA Isaac Gym 仿真器中学到的技能部署到现实世界的 Franka Emika Panda 机器人臂上。
Q：有没有大神可以介绍一下目前在机器人学习领域有何最新进展？
A：
NVIDIA Research 开发的一款名为 Eureka 的新型 AI 智能体可以教机器人复杂的技能，它教会了机器人手快速转笔，并且第一次转得像人类一样好。
开发者可以使用 NVIDIA Isaac Gym（一款用于强化学习研究的物理模拟参考应用）进行实验。Isaac Gym 基于 NVIDIA Omniverse 而构建，后者是一个用于基于 OpenUSD 框架构建 3D 工具和应用的开发平台。Eureka 自身是由 GPT-4 大语言模型驱动的。
该 AI 智能体使用 GPT-4 LLM 和生成式 AI 编写软件代码，为机器人进行强化学习提供奖励。它不需要任何特定任务提示或预定义的奖励模板，并且能够随时结合人类的反馈改进其奖励，使结果更加精准地符合开发者的愿望。
利用 Isaac Gym 中的 GPU 加速模拟，Eureka 能够快速评估大批奖励候选者的质量，从而提高训练效率。
Eureka 随后会基于训练结果汇总关键统计数据，并指导 LLM 改进其奖励函数的生成。通过这种方式，AI 可以自我完善。Eureka 教会了各类机器人，包括四足机器人、双足机器人、四旋翼机器人、灵巧手、协作机器人臂等，来完成不同类型的任务。
更多精彩问答，关注 NVIDIA 知乎账号！
NVIDIA英伟达中国 - 知乎