前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
具身智能/10.09 · 05:06/5 MIN/编译自 NVIDIA Writers/1 阅读

NVIDIA展示前沿AI智能体构建物理仿真全流程

开发者正将前沿AI模型与NVIDIA Omniverse结合,通过自然语言指令快速搭建高精度物理仿真应用。从仓储人形机器人、自动驾驶测试到空间站数字孪生,AI智能体大幅缩短了从创意构思到可运行仿真场景的开发周期。

NVIDIA展示前沿AI智能体构建物理仿真全流程

将一个仿真构想转化为真正可运行的应用,通常需要经历漫长而繁琐的环节:拼装数字资产、打通物理引擎与渲染管线,并持续验证场景行为是否符合现实物理规律。如今,开发者正在将前沿AI大模型与 NVIDIA Omniverse 开发库 深度结合,通过这一工作流探索复杂场景、排查系统缺陷并迭代优化设计。

在这一模式下,开发者通过自然语言指令指挥 AI 智能体,负责评估结果并引导改动;Omniverse 库则在底层提供 GPU 加速的物理引擎、照片级渲染以及高保真传感器仿真能力。从近期落地的一系列实验项目中,可以直观看到 AI 智能体如何在多个场景中重构物理仿真。

仓储环境中的人形机器人仿真

在将自动化任务部署到真实仓库前,开发者需要可交互的仿真环境来验证执行效果。NVIDIA Omniverse 产品经理 Frank DeLise 利用前沿 AI 智能体,将 SimReady 仓储资产与人形机器人模型转换为了支持第一人称和第三人称视角的交互式模拟器。

在此过程中,AI 智能体负责将 Omniverse 各核心库串联起来:负责物理仿真的 ovphysx、处理场景更新的 ovstage、渲染模块 ovrtx 以及用户界面库 ovui。AI 智能体还调用 simready-foundation 生成了物理场景,并自动编写了整合各项能力的动作与应用代码。

自动化构建自动驾驶测试流

场景、传感器配置或驾驶模型的细微调整,都会对自动驾驶仿真产生显著影响。NVIDIA 仿真技术团队负责人 Doyub Kim 指挥 AI 智能体构建了名为“Zero to Alpamayo”的复用型仿真环境,该场景还原了旧金山市场街。

智能体按规划分阶段打通了资产创建、交通流模拟、Omniverse RTX 传感器仿真 以及 Alpamayo 自动驾驶系统,并在每个节点自动验证整合结果。在此基础上,研究人员还通过 Cosmos3-Nano 调整视频中的天气与光照,在多变环境下比对驾驶模型在同一场景下的不同响应。

基于传感器差异校准数字孪生

仿真传感器能否真实反映现实,是机器人与自动驾驶落地的核心前提。NVIDIA 工程师 Ashley Reid 借助 AI 智能体比对 ovrtx 生成的虚拟相机和原始激光雷达数据与真实采集数据。智能体在三天内从零搭建了两个数字孪生场景,并对另外两个现有场景完成了修正。

在迭代过程中,智能体主动测量仿真与真实数据的误差,修改 OpenUSD 场景中的缺失物体、几何形状及材质属性,并通过量化指标评估修正质量,形成了一套以传感器误差驱动场景校准的自动化闭环。

机器人奥林匹克:物理约束下的动作验证

教机器人学会新动作,必须验证其动作是否符合现实物理约束。NVIDIA Omniverse 工程主管 Tae Kim 借助运动视频与自然语言指令,引导 AI 智能体搭建了名为“Robo Olympics”的实验项目,用于测试宇树 G1(Unitree G1)人形机器人的运动控制。

智能体生成了控制器逻辑,并通过物理实验不断迭代:利用 Newton 物理引擎 模拟动作表现,开源框架 NVIDIA Warp 提供计算加速,再由 ovrtx 输出渲染与虚拟相机画面。在跨栏测试中,机器人在 100 次仿真中成功跨过单个栏架 64 次,为算法的时序和控制调优提供了关键反馈。

结合 CAD 与仿真验证机械拆卸

在机器人执行拆卸任务前,必须评估其机械工具是否能触及并卸下零部件。NVIDIA 团队引导智能体在 PTC Onshape 中构建了汽车悬挂模型,并将其配置进 Isaac Sim。

智能体测算了装配空间,专门设计了一把机器人可握持并伸入拆卸螺栓的扳手,成功在仿真中完成了汽车悬挂部件的拆除。这种方法直接打通了计算机辅助设计(CAD)、工具开发与拆卸验证,为后续机器人策略训练打下了基础。

空间站实时数据与真实场景重构

除了机械控制,AI 智能体在资产集成与现实场景数字化上也表现突出。NVIDIA 工程总监 Nic Johns 仅凭单个 Prompt 就让智能体将 NASA 资产整合成包含实时遥测数据的 国际空间站模型,并通过追问指令直接将场景旋转至地球向阳面,使整个系统可在浏览器内直接运行。

标签:NVIDIAOmniverseAI 智能体数字孪生具身智能

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费
置顶

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费

微软和Meta收紧Claude:被削掉的是入口,不是模型
置顶

微软和Meta收紧Claude:被削掉的是入口,不是模型

前途科技前途科技
服务关于快讯技术商业报告
微信咨询二维码

咨询微信

扫码添加微信咨询

前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
OpenUSD

而在室内场景数字化方向,Isaac 工程团队引导智能体结合 PyCuSFM、FoundationStereo 和 nvblox,将双目相机采集的画面转化为可编辑的 OpenUSD 工作区。借助 USD Content Agents 配置物体的运动与交互方式,并在 Isaac Sim 中校验抽屉、柜门等构件的碰撞与接触逻辑,大幅降低了从实景扫描到物理级仿真交互的转化门槛。

FBTriton 重构 TBE:推荐系统嵌入算子的 Triton 内核设计与性能优化
置顶

FBTriton 重构 TBE:推荐系统嵌入算子的 Triton 内核设计与性能优化

//

24小时热榜

Rembrandt:免费本地AI图片编辑器,开源替代Adobe Lightroom
TOP1

Rembrandt:免费本地AI图片编辑器,开源替代Adobe Lightroom

Robotaxi迎来合纵连横时代:单打独斗已成过去
TOP2

Robotaxi迎来合纵连横时代:单打独斗已成过去

3

Anthropic更新使用政策:禁止虐待Claude模型

5小时前
Anthropic更新使用政策:禁止虐待Claude模型
4

基因组研究揭秘夏威夷与复活节岛先祖航海迁徙史

6小时前
基因组研究揭秘夏威夷与复活节岛先祖航海迁徙史
5

四巨头筹资近4000亿元,锁定AI算力军备竞赛

7小时前
四巨头筹资近4000亿元,锁定AI算力军备竞赛
6

华为等多团队开源企业级AgentOS,加速智能体规模落地

7小时前
华为等多团队开源企业级AgentOS,加速智能体规模落地
7

Anthropic 发起网络安全使命:用 AI 护航关键基建与开源生态

10小时前
Anthropic 发起网络安全使命:用 AI 护航关键基建与开源生态
8

OpenAI端掉俄伊AI虚假信息网:伪造智库与记者渗透主流媒体

18小时前
OpenAI端掉俄伊AI虚假信息网:伪造智库与记者渗透主流媒体
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断