大数跨境
0
0

协创数据 FCloud Omnibot整合NVIDIA Isaac GR00T Blueprint构建从仿真到泛化的数据增强闭环

协创数据 FCloud Omnibot整合NVIDIA Isaac GR00T Blueprint构建从仿真到泛化的数据增强闭环 FCloud-协创数据
2025-07-04
0
导读:打造数据服务闭环:从基础到增强的一站式能力

在具身智能机器人开发领域,"Sim2Real 差距" 长期制约机器人落地 —— 传统仿真数据难以复现真实世界的物理规则与动态变化,导致算法在实际场景中表现欠佳。

协创数据FCloud Omnibot具身智能开发平台深度融合NVIDIA领先的AI机器人技术,创新性地整合了NVIDIA Isaac GR00T Blueprint参考架构该解决方案基于NVIDIA Omniverse数字孪生平台与NVIDIA Cosmos数据生成引擎构建,实现了机器人运动训练范式的突破:仅需少量真人示范样本,即可高效生成大规模、多场景的合成运动轨迹数据集。

这种智能化的据增强方案具有双重优势:一方面大幅降低传统数据采集与标注的成本,另一方面通过高保真模拟复杂环境,显著提升了机器人运动算法在真实场景中的适应性与泛化能力。


NVIDIA Isaac GR00T Blueprint 

 NVIDIA Isaac GR00T Blueprint 架构


用于合成运动生成的 NVIDIA Isaac GR00T Blueprint 是基于 NVIDIA Omniverse 和 NVIDIA Cosmos 构建的参考工作流。它从少量的人类演示中创建了大量的合成运动轨迹,用于机器人操作。

利用为该蓝图提供的首批组件,NVIDIA 能够在短短 11 小时内生成 780,000 个合成轨迹,相当于 6,500 小时或连续九个月的人类演示数据然后,通过将合成数据与真实数据相结合,与仅使用真实数据相比,NVIDIA 将 GR00T N1 的性能提高了 40%。

该工作流包括以下关键组成部分:

  • GR00T-Teleop即将推出,但目前已经可以使用蓝图中提供的样本数据。

  • NVIDIA CloudXR Runtime:将 Isaac Lab 中的仿真传输到 Apple Vision Pro,并接收用于人形机器人远程操作的控制数据。

  • 适用于 Apple Vision Pro 的 Isaac XR Teleop 示例应用:使用户能够与从 CloudXR Runtime 流式传输的 Isaac Lab 仿真进行沉浸式交互,并发送回用于人形机器人远程操作的控制数据。


GR00T-Mimic:使录制的演示作为输入,在 Isaac Lab 中生成额外的合成运动轨迹。此蓝图的第一版仅适用于单臂操作,支持人形机器人双臂操作的版本即将推出。

  • 要录制您自己的动作,请使用空格鼠标控件记录动作。更多信息,请参阅生成其他演示:

    https://isaac-sim.github.io/IsaacLab/main/source/overview/teleop_imitation.html#generating-additional-demonstrations


GR00T-Gen:通过随机化场景中的背景、光照和其他变量来增加多样性,并通过 NVIDIA Cosmos Transfer 增强生成的图像。


Isaac Lab:使用统一的开源机器人学习框架训练机器人策略。Isaac Lab 基于 NVIDIA Isaac Sim 构建。


远程操作架构



协创数据Fcloud Omnibot

打造数据服务闭环:从基础到增强的一站式能力


仿真技术提升机器人开发速度


Ominibot具身智能开发平台提供三大核心数据服务体系

1. 通用数据集:夯实机器人开发基础

omnibot平台提供通用数据集下载,覆盖机器人开发全场景的高质量数据,助力快速构建可落地的AI模型。

  • 基础运动轨迹库包含机械臂抓取、移动导航、人机协作等标准化动作数据,支持模仿学习(IL)与强化学习(RL) 训练。

  • 仿真场景数据集基于 NVIDIA Omniverse 生成的高保真3D环境(仓库、家庭、街道等),提供物理真实的交互数据。

  • 多机器人协同数据适用于集群机器人调度、多机协作任务,优化群体智能算法。

减少开发者数据采集成本,直接调用行业验证数据,平台兼容 ROS、Isaac Sim 等开发框架,即插即用。

2. 多源数据资产:跨平台数据融合

Omnibot平台整合 NVIDIA 生态及互联网开放数据,构建面向真实场景的数据中台。

  • NVIDIA数据Isaac Lab 机器人训练数据集(如物体抓取位姿、动态避障轨迹)

  • 互联网开源数据3D 场景数据集(如 Matterport3D、ScanNet),人类行为数据(如 CMU MoCap、NTU RGB+D)。

破数据孤岛,一站式获取多模态训练素材

3. 智能数据增强:突破现实数据瓶颈

基于NVIDIA Cosmos™ 的数据优化与生成技术,解决具身智能机器人开发长期面临 Sim2Real 差距巨大的问题。在Omnibot平台 API 一键调用NVIDIA Cosmos transfer-1模型:

  • 视觉数据增强超分辨率重建,提升低质量图像至4K级,修复模糊、抖动问题。光照域适应,模拟不同时间(昼夜)、天气(雨雪雾)下的成像效果;对抗样本生成:增强模型对遮挡、噪声的鲁棒性。

  • 运动数据增强模拟电机延迟、摩擦扰动,提升控制泛化性;仿真-现实数据对齐通过 域随机化(DR) 缩小Sim2Real差距。

数据量提升 10倍+,覆盖长尾场景。


协创数据Fcloud X NVIDIA

推动具身智能机器人规模化落地

协创数据Fcloud作为 NVIDIA NCP(云服务合作伙伴),未来将与 NVIDIA 在技术研发与市场拓展中深化合作:一方面,探索将 NVIDIA 最新的多模态大模型(如 Nemo)集成到 FCloud Omnibot,实现 “自然语言描述 - 场景自动生成 - 数据标注” 的全流程智能化;另一方面,借助 NVIDIA 的全球资源,推动 FCloud Omnibot 在生物医药、智能驾驶、制造业、智慧农业等场景的落地,助力具身智能机器人安全、高效地融入各行业物理场景,开启机器人技术规模化应用的新篇章。

*文章中与NVIDIA产品相关的图片或视频(完整或部分)的版权均归NVIDIA Corporation所有。


更多惊喜,速来体验


码立即体验



关于FCloud
奥佳软件FCloud是协创数据技术股份有限公司(股票代码:300857)旗下专注于人工智能以及智算平台建设和服务的品牌。构建基于GPU的高性能网络基础设施、多租户云平台,并支持大规模AI训练和推理服务。作为NVIDIA CLOUD PARTNER,FCloud以上海浦东张江、北京综保区等区域为NVIDIA GPU算力中心逐步推进全国范围内的GPU算力网络,拥有ACAcloud云平台、Omnibot机器人开发平台和ACAstack训推一体机等核心产品,为具身智能机器人、生物医疗、芯片制造等国家重点产业提供从算力基建到AI训练推理的全栈服务。以"连接+智算"为核心,持续推动产业智能化升级和AI技术规模化应用。


相关阅读

【声明】内容源于网络
0
0
FCloud-协创数据
Fcloud是上市企业协创数据技术股份有限公司(股票代码:300857)旗下专注于人工智能以及智算平台建设和服务的品牌。构建基于GPU的高性能网络基础设施、多租户云平台,并支持大规模AI训练和推理服务。
内容 18
粉丝 0
FCloud-协创数据 Fcloud是上市企业协创数据技术股份有限公司(股票代码:300857)旗下专注于人工智能以及智算平台建设和服务的品牌。构建基于GPU的高性能网络基础设施、多租户云平台,并支持大规模AI训练和推理服务。
总阅读14
粉丝0
内容18