解决方案

SOLUTION DETAIL

京东 JoyAI-Sim 联合 NVIDIA Isaac Lab-Arena:构建人机对齐的具身智能仿真评测全流程

京东推出 JoyAI-Sim 人机数据对齐工具链,结合 NVIDIA Isaac Lab-Arena 的高保真渲染、Newton 物理仿真与规模化并行评测,在京东云 JoyBuilder 上提供从数据生产、仿真评测到模型迭代的全流程服务,降低具身模型真机评测成本。

当前位置:首页 > 解决方案
京东 JoyAI-Sim 联合 NVIDIA Isaac Lab-Arena:构建人机对齐的具身智能仿真评测全流程
解决方案
SOLUTION OVERVIEW

京东 JoyAI-Sim 联合 NVIDIA Isaac Lab-Arena:构建人机对齐的具身智能仿真评测全流程

京东推出 JoyAI-Sim 人机数据对齐工具链,结合 NVIDIA Isaac Lab-Arena 的高保真渲染、Newton 物理仿真与规模化并行评测,在京东云 JoyBuilder 上提供从数据生产、仿真评测到模型迭代的全流程服务,降低具身模型真机评测成本。

  • 方案分类 解决方案
  • 内容形式 场景方案 / 技术解析
  • 服务支持 咨询、测试申请、实施建议

如果你正在评估对应场景,我们可以基于当前方案继续细化产品组合、测试路径与实施节奏。

浏览更多相关方案
DETAIL MODULES

方案详情

查看方案背景、关键能力与适配场景,帮助你更快判断下一步应进入测试、咨询还是部署阶段。

京东 JoyAI-Sim 与 NVIDIA Isaac Lab-Arena 具身仿真评测

方案背景:具身智能正从单点算法突破走向数据、仿真、评测与部署协同演进。真机评测最接近实际部署环境,但成本高、速度慢、场景复位困难,模型评测难以规模化;同时仿真与现实之间的视角、布局、材质差异,也让仿真结果难以直接采信。京东为此推出 JoyAI-Sim“机器人⇌仿真⇌人类”人机数据对齐工具链,并与 NVIDIA Isaac Lab-Arena 结合,形成可规模化复用的仿真评测方案。

解决方案与架构:方案分为两层。第一层由 JoyAI-Sim 从 0 到 1 构建与真机评测对齐的仿真任务:把真实场景、机器人本体、任务流程按真实尺寸、质量与材质还原到仿真中,并通过真实视频与仿真渲染结果的校准比对,持续修正视角、空间布局和资产参数。第二层由 Isaac Lab-Arena 从 1 到 N 扩展评测规模:将验证过的场景、机器人与任务规则组织为标准化组件,支持跨本体、跨物体、跨环境的大规模并行 Rollout。

核心技术组件:Isaac Lab-Arena 提供 RTX 高保真材质与光照渲染、Newton 物理引擎的高精度接触与碰撞还原,以及精简统一的任务接口,降低评测任务开发门槛;JoyAI-Sim 则负责数据资产物理属性还原、真机与仿真对照测试、域随机化与人类反馈评审,可记录任务成功率、碰撞、超时、轨迹、关节状态及多视角视频。

实施成果:以桌面整理任务为例,模型分别部署到真机与仿真环境开展 Rollout,仿真评测与真实评测结果保持约 1:1 的一致性;依托并行仿真与规模化调度,整体评测效率显著高于真机评测;由于统一了初始状态、场景配置与评测流程,重复评测的结果偏差较真机评测明显降低。相关实践已在京东云 JoyBuilder 模型开发平台发布,开发者可直接运行 Notebook 工作流。

未来展望:JoyAI-Sim 与 Isaac Lab-Arena 的组合把“可信单任务评测”和“规模化任务扩展”连成闭环,让同一模型能在统一任务定义下完成真机与仿真对照测试,为具身模型训练、策略评估和 Sim-to-Real 迁移建立可复用的基线。随着任务库与数据合成能力扩展,这一方案可进一步覆盖工业、商用服务与家庭场景的机器人开发。

EVALUATION CHECKLIST

方案评估清单

在进入报价、测试或实施前,先把业务目标、现网条件和风险边界整理清楚。

GOAL

业务目标

明确要解决的性能、扩容、稳定性、覆盖、互连或运维问题,并确认上线优先级。

NETWORK

现网条件

整理拓扑、服务器/交换机型号、接口速率、链路距离、供电散热和现有管理平台。

VALIDATION

验证范围

确认是否需要 PoC、兼容测试、吞吐测试、时延测试、无线覆盖测试或故障切换测试。

DELIVERY

落地边界

确认交付窗口、责任分工、备件策略、培训需求、验收指标和后续扩容路径。