引入聊天机器人技术显著提升客户服务水平,交汇金融与营销数据推动跨行业数据深度融合,为程序员提供更为高效的编程途径,助力管理人员更方便地编写带有预测性质的报告……
随着生成式人工智能(GenAI)的崛起和GenAI的广泛应用,越来越多行业焕发出新的生机。
然而,尽管GenAI在多个领域大放异彩,但其在“生成物理AI”方面的应用却鲜少受到公众的关注。这一领域涵盖的实例包括机器人技术,特别是被视为机器人技术典范的自动驾驶汽车,以及各种工业机械。
今年早些时候,Nvidia的首席执行官黄仁勋在GTC大会上深入探讨了适用于各类机械的GenAI,
而如今,Nvidia对于其未来发展方向已经有了更为明确和具体的规划。
在本周于西雅图召开的计算机视觉和模式识别
(CVPR)会议
上,Nvidia研究团队惊艳亮相,
展示了多达50项与视觉生成AI相关的前沿研究项目
。这些研究主要聚焦于探索和开创图像、视频以及3D环境创建与解读的新技术。
值得一提的是,Nvidia还巧妙利用Omniverse平台,为CVPR的AI城市挑战赛打造了规模最大的室内合成数据集,充分彰显了其在AI技术领域的深厚底蕴。
近日,Nvidia又宣布推出新产品——NVIDIA Omniverse Cloud Sensor RTX,
这无疑是其在AI领域持续创新的又一力证。
▍NVIDIA Omniverse Cloud Sensor RTX是什么?
NVIDIA Omniverse Cloud Sensor RTX是一套高效的微服务系统,
能够精准模拟物理传感器,为各类自主机器的研发提供强有力的支持。作为OpenUSD应用程序的开发平台,它专注于推动工业数字化与生成性物理AI的进步。
该系统不仅可
生成合成数据以加快AI开发,还可实现物理上精确的传感器模拟,
从而加速全自动机器的研发进程。这一解决方案使得开发人员可以在测试环境中开发用于自主机器(如车辆、人形机器人、工业机械手、移动机器人等)的软件,并在真实的测试环境里测试传感器感知和其他相关的人工智能软件,确保在实际部署前达到最佳状态。
传感器数据对于工业机械、移动机器人、自动驾驶汽车、人形机器人等领域至关重要,可为这些设备提供理解物理世界并做出明智决策所必需的信息。借助NVIDIA Omniverse Cloud Sensor RTX,
开发人员可先在物理上精确且逼真的虚拟环境中测试传感器感知能力和相关AI软件,确保在实际部署前达到最佳状态。
这在显著提升安全性的同时有效节省了时间和成本。
NVIDIA Omniverse 和模拟技术副总裁 Rev Lebaredian 表示:“开发由生成物理 AI 驱动的安全可靠的自主机器需要在基于物理的虚拟世界中进行训练和测试。Omniverse Cloud Sensor RTX 微服务将
助力开发人员轻松构建工厂、城市甚至地球的大规模数字孪生,
从而帮助加速下一波 AI 浪潮的到来。
▍NVIDIA Omniverse Cloud Sensor RTX能做什么?
Omniverse Cloud Sensor RTX基于
OpenUSD
框架构建,并结合了NVIDIA RTX光线追踪和神经渲染技术,能够将真实世界数据与合成数据完美融合。
据NVIDIA介绍,Omniverse Cloud Sensor RTX不仅是一个强大的微服务系统,更通过其软件应用程序编程接口(API)为各行各业自主机器的开发提供加速度。这一技术的核心功能在于,它
能够将来自视频、摄像头、雷达以及激光雷达的真实数据与合成数据进行有效结合,从而极大地提升模拟环境的创建效率。
值得注意的是,该技术所提供的模拟能力不仅局限于常见的机械运动或环境感知,更
可延伸至医疗应用中的柔性织物传感器模拟,或是用于评估人群运动、温度、压力和气体等多种复杂场景的房间传感器模拟。
这种广泛的适用性使得Omniverse Cloud Sensor RTX在众多行业中都具有巨大的应用潜力。
NVIDIA强调,
即便是在现实世界数据有限的情境下,其微服务也能够精准模拟各种活动。
例如,机械臂的运行状态、机场行李传送带的工作情况、道路障碍物如树枝的识别,甚至是工厂传送带的运动和附近机器人或人员的检测等。这些模拟能力不仅提升了设备在复杂环境中的感知和决策能力,同时也大幅缩减了物理原型设计所需的时间与成本。
有业内专家指出,NVIDIA的这一技术革新将对自主机器的研发产生深远影响。与传统的开发方法相比,Omniverse Cloud Sensor RTX通过高效的模拟手段,不仅提高了开发效率,更能够在安全性、可靠性等方面提供强有力的保障。随着技术的不断进步和应用场景的拓展,有理由期待这一技术将在推动工业数字化与生成性物理AI的进步中发挥更加关键的作用。
▍NVIDIA Omniverse Cloud Sensor RTX的申请与试用
截止目前,NVIDIA
已向CARLA、Foretellix和MathWorks开放了访问权限。
作为首批合作伙伴,他们将接入最新的Omniverse Cloud Sensor RTX技术。这一技术的引入,有望为这些自动驾驶汽车(AV)软件开发商带来前所未有的模拟与测试能力,带领其迈入一个全新的模拟与测试时代。
据NVIDIA透露,Omniverse Cloud Sensor RTX微服务不仅将极大提升自动驾驶软件的开发与测试效率,更为传感器制造商提供了一个便捷的平台,在虚拟环境中轻松验证和集成系统的数字模型。这一创举预计会显著降低物理原型设计的成本和时间,从而推动自动驾驶技术的飞速进步。
据悉,Omniverse Cloud Sensor RTX技术的全面上市计划定在今年晚些时候,开发人员可通过网址https://developer.nvidia.com/login抢先注册体验。
颇值意味的是,此次微服务的推出恰值NVIDIA在CVPR大规模端到端自动驾驶大赛中勇夺桂冠之际。NVIDIA研究人员所使用的获奖工作流程可在Omniverse Cloud Sensor RTX的高保真模拟环境中得到完美复制。这意味着,在自动驾驶汽车真正上路之前,开发人员可以在高度逼真的虚拟环境中对其进行全方位的测试。
在学术领域,NVIDIA同样取得了显著成就。在全球 450 多个参赛作品中,NVIDIA入围CVPR最佳论文奖决赛的两篇论文,分别探讨了扩散模型的训练动力学和自动驾驶汽车的高清地图制作。NVIDIA在端到端大模型自动驾驶比赛中的胜利,进一步证明了其在综合自动驾驶模型中应用生成式人工智能的领先地位。
NVIDIA学习与感知研究副总裁Jan Kautz表示,生成式人工智能代表着关键的技术进步,它正在突破各种可能性界限,从助力专业创作者到实现下一代自动驾驶汽车的革新。Omniverse Cloud Sensor RTX的上市,不仅将为自动驾驶行业带来了新的希望,更将在人工智能在各个领域将发挥巨大潜力。
如需咨询企业合作事宜,欢迎联系堂博士(13810423387,手机与微信同号)进行对接。
----------------END----------------