专栏名称: 扩展迷EXTFANS
科技圈一手资讯,实用资源分享,互联网尽在掌握。
目录
相关文章推荐
环球人物  ·  “银行家”当总理,硬刚美国总统 ·  19 小时前  
每日人物  ·  又一批抄底大理民宿的人,后悔了 ·  昨天  
药渡  ·  研讨会直播 | ... ·  3 天前  
宁夏药安早知道  ·  宁夏药品不良反应监测能力建设再上新台阶——全 ... ·  2 天前  
宁夏药安早知道  ·  宁夏药品不良反应监测能力建设再上新台阶——全 ... ·  2 天前  
山东药品监管  ·  “安全用械,良法护航”—— ... ·  3 天前  
51好读  ›  专栏  ›  扩展迷EXTFANS

稚晖君又放大招:开源自研框架,做养老机器人!

扩展迷EXTFANS  · 公众号  ·  · 2025-03-04 18:48

正文

本文转载自公众号: 机器人前瞻

智元机器人第二次开源行动来了。
作者 | 许丽思
编辑 | 漠影
机器人前瞻2月25日报道,今天,智元机器人推出自主研发的 大型仿真框架AgiBot Digital World 为机器人操作提供灵活的仿真数据生成方案、预训练的大规模仿真数据和统一的模型评测标准,还同步开源了海量仿真数据。
AgiBot Digital World是一款专为机器人操作技能研究与应用设计的仿真框架,集成了 海量的逼真三维资产、多样化的专家轨迹生成机制和全面的模型评估工具。 通过高保真地模拟训练场景,全链自动化地生成数据,AgiBot Digital World可以实现一系列的具身仿真服务,比如惟妙惟肖地模拟各种机器人训练场景等。

与此同时,智元机器人开源上线海量规模的 仿真数据集AgiBot Digital World Dataset ,涵盖5大类场景、180+品类具体物品、9种常见材质、12种核心技能。

01 .

丰富三维资产库
为机器人打造高保真模拟训练场景


AgiBot Digital World的三维资产库,拥有丰富多样的 物体、场景和机器人模型, 这些资产通过 人工精细建模、三维重建技术和生成式人工智能(AIGC) 等途径转化而来,能够满足各种复杂机器人操作任务的仿真需求。



▲高度真实、多样的三维资产

基于NVIDIA Isaac-Sim仿真平台,AgiBot Digital World能提供 高度逼真的视觉渲染和精确的物理模拟, 仿真情景与真实世界之间的域差异小,感知和交互的细节真实。
光透过玻璃窗投射的光影、随着机器人的动作而变动的倒影,视觉效果看起来很自然。

AgiBot Digital World还能模拟出真实世界的物理效应,当机器人把小车放到篮子里时,触碰的时候两者也随之晃动。

AgiBot Digital World引入多模态大模型,支持基于资产库 自动生成操作任务,以及基于指定任务自动生成操作场景和物体布局。 该功能能可以根据实际训练需求,灵活创建多样化、复杂度可调的仿真任务与仿真环境,实现数据闭环。
比如在书房中,如果机器人想从桌面任务转向书架上的立面操作,那么可以一键召唤取书任务,系统将自动捕捉到环境中的书架。

而如果当前环境无法满足任务需求,比如缺少特定物体,那么系统也可自动调用资产库补充物体,或切换至适配场景。


02 .

全链路自动化生成数据
提升泛化性


AgiBot Digital World可以提供多元化专家轨迹生成策略,具体来说包括以下三方面:
  • 真机操作数字孪生: 支持真实机器人操作轨迹数据1:1映射到仿真环境中,用于生成更丰富的数据标签以及为数据增广提供专家示例轨迹。







请到「今天看啥」查看全文