专栏名称: 将门创投

将门是一家专注于发掘及加速技术创新激活商业价值的创业公司的创投机构。将门旗下设有将门创新服务、将门技术社群以及将门投资基金。关注领域包括机器智能、物联网、自然人机交互、企业计算。

活动报名 | 探秘自主机器人领域：19 位青年报告嘉宾集结，ARTS 2024研讨会震撼来袭！

将门创投 · 公众号 · 科技创业 · 2024-11-08 08:22

正文

ARTS 2024

为了促进自主机器人领域一线青年学者/工程师的交流，推动学术界与企业界的交融与产学研合作，搭建一个深度、纯粹的技术交流平台，中国自动化学会决定主办自主机器人技术研讨会（Autonomous Robotic Technology Seminar，简称ARTS）。

ARTS作为中国自动化学会青年菁英系列活动的重要组成部分，倡导理性批判、敢于质疑、务实的科学精神，积极探索自由平等的思想交锋。ARTS主要关注传感与感知、自主导航、状态估计、移动机器人定位建图、运动规划、建模与控制、多机器人系统、具身智能等方向。第二届ARTS大会将于 2024年11月23日-24日在中山大学深圳校区举办 。诚挚邀请您参加，并对大会的组织提供意见和建议！

组织机构

ARTS

主办单位： 中国自动化学会

承办单位： 中山大学智能工程学院

协办单位： 深蓝学院

组委会人员

ARTS

大会主席：

郑跃中山大学

张楠中国自动化学会

高飞浙江大学

程序委员会主席 ：

陈谢沅澧国防科技大学

范睿同济大学

刘哲上海交通大学

缪志强湖南大学

王超群山东大学

王越浙江大学

吴荩北京科技大学（拟入职）

徐浩北京航空航天大学（拟入职）

许华哲清华大学

姚伟嘉湖南大学

岳裕丰北京理工大学

张雪涛大连理工大学

周易湖南大学

本地主席：

吕熙敏中山大学

会议日程

ARTS

嘉宾介绍

ARTS

张富

香港大学长聘副教授

报告主题：

基于激光雷达的自主无人机系统

报告摘要：

在过去的几十年里，小型多旋翼无人机 (UAV) 受到了广泛的研究关注。这些无人机在各种应用中都显示出了巨大的潜力，包括航空摄影、农业、配送、测绘和测量。然而，要使这些应用取得成功，必须在未知环境中进行自主避障。在该报告中，我们将讨论如何使用激光雷达来实现自主无人机导航。具体来说，我们将探索激光雷达技术的最新进展，并重点关注导航算法，包括定位、建图、规划和控制。我们将展示如何在小型无人机上使用激光雷达传感器来实现复杂的导航任务，例如高速避障、环境探索和敏捷无人机运动估计航算法，包括定位、建图、规划和控制。我们将展示如何在小型无人机上使用激光雷达传感器来实现复杂的导航任务，例如高速避障、环境探索和敏捷无人机运动估计。

石凡

新加坡国立大学助理教授

报告主题：

Learning,Control,and Safety for Enhanced Legged Dexterity

报告摘要：

With the advance in optimal control and reinforcement learning, latest controllers have demonstrated exceptional performance on complex multi-limbed robots, including the application in aerial manipulation, quadrupedal locomotion, and dexterous hand skills. Despite these advancements, comprehensive safety validation remains a prerequisite for their large-scale real-world deployment. Current state-of-the-art (SOTA) controllers exhibit robustness against standard testing paradigms, domain randomization, and evaluations by human experts. In this talk, I will first introduce our progress on enhancing dexterity of the robots, and then our recent research revealing vulnerabilities in long-tested state-of-the-art controllers on the legged locomotion and dexterous manipulation when subjected to minor perturbations generated by AI agents. This study highlights critical safety concerns and emphasizes the necessity of addressing these vulnerabilities to enhance system reliability. The failure cases identified in our analysis offer valuable insights into system components, providing a foundation for improving the robustness and safety of black-box neural controllers.

王越

浙江大学教授

报告主题：

Global Consistency: To be or not to be？

报告摘要：

全局一致是移动机器人定位与建图（SLAM）的关键目标，也是领域多年来的研究热点。考虑到机器人点到点导航的整个任务，全局一致的定位与建图主要服务于全局规划，进而引导机器人的局部运动规划完成整个导航任务。因此，本报告尝试从局部运动规划的视角来看待全局一致性，以此为线索介绍课题组从经典导航理论方法，到近年来多模态导航相关工作，探讨全局一致性的角色和必要性。

许华哲

清华大学助理教授

报告主题：

Learning to Manipulate Anything Anywhere

报告摘要：

Why don’t robots work for humans in our daily tasks? At the heart of this problem is that the robots cannot generalize to the desired tasks. But what is generalization? With the most general notion of generalization, problems-solving at any unseen physical scenarios reside in the domain. That being said, a thorough ontology of factors in generalization might provide a welcoming avenue toward empowering robots to do all kinds of tasks. In this talk, I will present key factors in robot generalization and show how hard it is for a robot to generalize even toward an easy perturbation. I will also present tentative solutions to solve these challenges. With all the challenges combined, we conclude the real goal for robot learning is to learning to manipulate anything anywhere.

高飞

浙江大学长聘副教授

报告主题：

仿生飞行智能

报告摘要：

受限于感知、计算、机动性和能耗，无人机在复杂环境中的自主飞行与集群协同仍面临诸多挑战。自然界的飞行生物则具有敏锐感知和灵巧机动能力，可以从仿生的角度启发我们对飞行智能开展进一步研究。本次报告，我将从敏锐感知、自主决策、飞行交互、集群智能四个方面介绍团队在无人机单机与集群自主导航方法上所做出的最新创新贡献，展示在不依赖外部定位和计算设施，仅靠机载摄像头、计算芯片和传感器的无人机动态环境鲁棒感知、快速安全机动飞行、动态飞行抓取操作、集群协同感知避障等方面的最新研究成果。

万伟伟

大阪大学副教授

报告主题：

从人形机器人到双臂操作

报告摘要：

在这个讲座中我主要介绍一下日本人形机器人的开发历史，现状，以及我个人在参与人形机器人开发中的经历，感触，以及成果。我的研究重点在于人形机器人的上半身，即双臂操作及其在各种生产活动中的应用，目标是替代传如同自动化难以代替的需要柔性的人类的劳动。欢迎对人形机器人，双臂操作，非标自动化感兴趣的专家与同行莅临指导。

Hector Garcia de Msrina

Research Professor with the University of Granada

报告主题：

Practical challenges in mobile robot swarms

报告摘要：

Robot swarms have the potential to assist us with simpler logistics in persistent missions involving vast scenarios. Robot swarms also promise added resilience to complete their objectives despite unforeseen difficulties. However, current demonstrations of swarm technology in unstructured environments only count on single-digit individuals. That is farther from what one would expect from the huge scaling potential of a swarm. Where are the bottlenecks then?

In this talk, I will present some practical challenges that mobile robot swarms face in formation control, radio networks, and onboard imperfections, among others. We will also explore the hidden opportunities that imperfections can offer for the coordination of mobile robot swarms.

顾家远

上海科技大学助理教授

报告主题：

通过轨迹去学习更泛化的机器人操作技能

报告摘要：

尽管数据驱动的模仿学习取得了显著进展，但开发能够掌握多种技能以处理广泛任务的通用机器人操作策略仍然面临巨大挑战。为此，我们提出了RT-Trajectory，通过结合现有的示范数据集和一种新颖的策略条件——轨迹草图（trajectory sketch），旨在提升任务层面的泛化能力。轨迹草图描绘了机器人末端执行器应采取的运动轨迹，使策略能够以可提示的方式适应具有新颖语义和运动特征的未见任务。此外，我们开发了Simpler-Env模拟仿真平台，以便研究者在仿真环境中评测基于真实机器人数据训练的操作策略。通过实验，我们验证了该仿真平台与实际操作成功率之间的高度相关性，从而证明其在模型评估中的有效性和可靠性。

白辰甲

中国电信人工智能研究院研究科学家

报告主题：

大模型驱动的具身智能

报告摘要：

具身智能是人工智能、机器人学、认知科学的交叉领域，主要研究如何使机器人具备类似人类的感知、规划、决策和行为能力。大模型具有对物理世界的丰富知识，能够为智能体提供自然语言交互、环境感知和任务规划的能力，同时能够和具身智能的传统框架相结合，提升智能体策略学习的泛化性。本报告将介绍相关技术背景，包括具身智能概念，大模型技术，强化学习、模仿学习、模型预测控制等策略学习框架。随后，从学习范式的角度将大模型驱动的具身智能算法分为五类并依次进行了阐述，分别是大模型驱动的环境感知、大模型驱动的任务规划、大模型驱动的基础策略、大模型驱动的奖励函数、大模型驱动的数据生成。最后介绍TeleAI具身智能团队在大模型驱动的具身智能方面的最新成果。

周顺波

华为云具身智能创新Lab技术负责人

报告主题：

大模型时代的机器人开发与应用探索

报告摘要：

本次报告主要分享华为云在大模型与机器人领域的洞察与思考，以及在具身数据和仿真平台等方面的初步实践。

阚震

中国科学技术大学教授

报告主题：

非结构环境下的机器人智能控制与协作

报告摘要：

机器人技术发展的重要愿景之一就是在动态、不确定、未知的非结构环境下工作。然而，面对非结构环境，现有的机器人应变能力差，智能程度弱，仍缺乏自主感知、决策与控制等能力。本报告将介绍基于Linear Temporal Logic （LTL）的具有时序约束和逻辑约束的复杂任务刻画，并在此基础上从任务-环境冲突消解策略下的机器人运动规划，弱化信息条件下的机器人反应式运动规划，多目标多约束下的多异构机器人协同规划与控制等方面介绍非结构环境下的机器人智能控制与协作的最新研究进展。

国萌

北京大学助理教授

报告主题：

多智能体系统的组合混合优化

报告摘要：

多智能体系统通过协同协作在完成大量复杂任务时可展现出很高的效率，例如在运输、维护、搜索和救援等典型任务。这种协同通常包含两个方面（i）选择适合各个子任务的协作子团队；(ii) 设计协作模式和控制策略来执行这些子任务。前一方面的复杂程度取决于团队规模和任务复杂度，而后一方面则需在几何和动态约束下优化联合状态动作空间。现有研究通常倾向于解决其中一方面，而假设另一方面已给定，因此忽略了它们的密切依赖性。此类问题可以用组合混合优化（Combinatorial-hybrid optimizations）来描述，其中协作团队构成、离散协作模式和连续控制参数需通过迭代同时进行优化。我们所提出的框架由两个交错层组成：首先，提出了基于分布式任务联盟的纳什稳定联盟算法，来解决任务分配；其次，提出了基于协作模式梯度引导的混合搜索算法，来处理混合优化。最后，为了加快在动态环境中进行在线适应，我们提出了基于异构图注意网络的学习启发方法，用于选择更合适的规划参数和局部协调的过程中交换更有前景的解决方案。我们的提出的框架在动态捕获、周边防御和协作搬运等多个应用场景中得到了验证。

赵昊

清华大学助理教授

报告主题：

生成式仿真为具身智能释放无限灵感

报告摘要：

生成式仿真技术正迅速成为具身智能发展的关键驱动力。具身智能，作为感知、理解并与物理世界交互的智能体，其发展受制于训练环境的复杂性和多样性。生成式仿真通过动态创建丰富多样的虚拟训练场景，为智能体提供了前所未有的训练机会，突破了传统仿真环境的限制。本次报告将结合具身智能在各个领域的实际应用，深入探讨生成式仿真如何推动智能体从预设任务走向真正的自主学习与创新。生成式仿真不仅提升了智能体的适应性和鲁棒性，还为它们提供了应对现实世界中复杂问题的创新灵感。该技术通过不断生成多样化的仿真场景，使得智能体能够在更加逼真的虚拟环境中进行有效学习，从而提高其面对真实世界时的表现。本次报告将通过具体实例，展示生成式仿真在自动驾驶、机器人技术、虚拟现实等领域的巨大潜力，以及其在推动具身智能发展中的核心地位。可以预见，生成式仿真必将为未来智能体的设计与开发工作开辟无限可能，并激发出源源不断的创新灵感。

庞江淼

上海人工智能实验室青年科学家

报告主题：

泛化运动与操作智能

报告摘要：

近年来具身智能技术迅速发展，但依然面临不同环境泛化性的挑战，本报告将围绕“泛化运动与操作智能”展开介绍。在运动智能方面，介绍一种结合环境信息的高效运动控制算法，其通过雷达或深度相机生成高度地形图，并作为感知信息输入给运动策略，仅需在RTX 4090上训练三小时，便能处理各种复杂地形。在操作智能方面，介绍一种端到端的未来预测状态引导下的逆动力学模型，其利用大型机器人数据集DROID预训练后，通过少量微调即可适应不同场景，得益于预测未来和动作执行之间的协同机制以及大规模预训练，该算法显著提升操作成功率并增强泛化能力。

梁俊卫

香港科技大学（广州）助理教授

报告主题：

面向通用服务的具身智能

报告摘要：

近年来，随着机器人硬件、多模态大模型的发展，具身智能在学术界和工业界都受到越来越多的关注，面向通用服务的智能机器人已成为重要的研究热点。本次讲座梁俊卫博士将从移动和操作两个方面分享实验室近期面向通用服务具身智能的研究进展，包括：给定自然语言描述的无地图视觉开集目标导航，以及基于行人轨迹预测的社交导航系统，研究工作发表于ECCV 2024；面向自然语言的机器人操作对比模仿学习，研究工作发表于CoRL 2024；最后包括基于强化学习整身控制策略的低成本遥操作系统，该成果发表于IROS 2024（口头报告）。

黄思远

北京通用人工智能研究院研究科学家

报告主题：

活动报名 | 探秘自主机器人领域：19 位青年报告嘉宾集结，ARTS 2024研讨会震撼来袭！

正文

请到「今天看啥」查看全文