添加小助理：cv3d008，备注：方向+学校/公司+昵称，拉你入群。文末附3D视觉行业细分群。
扫描下方二维码，加入「
3D视觉从入门到精通
」知识星球
，星球内凝聚了众多3D视觉实战问题，以及各个模块的学习资料：
近20门秘制视频课程
、
最新顶会论文
、计算机视觉书籍
、
优质3D视觉算法源码
等。想要入门3D视觉、做项目、搞科研，欢迎扫码加入！
昨日，何小鹏在微博高调宣布，“全球首款AI汽车”小鹏P7+将在10月份正式上市。
“全球首款AI汽车”、“中国智驾里程碑”，这两个title打得实在“骄傲”，让我们不禁汗颜：
国内乃至全球已经落地的智驾辅助系统非常之多，这款车到底不同在何处？能够打出如此高调的招牌？它的AI技术亮点到底在何处？
▍
应用于智舱和智驾的AI天玑系统
今年上半年的北京车展中，小鹏汽车首次公开自研的AI天玑系统，官方称其是行业首个将AI技术全面应用于智能座舱与智能驾驶的操作系统。
该系统标志着小鹏汽车全面进入AI时代，通过多维度、全方位地支持用户的驾车和乘车生活，提升整体的出行品质。
1. AI司机｜进阶的智驾辅助系统
天玑中的XNGP（Navigation Guided Pilot）智能辅助驾驶系统是小鹏汽车的第二代智能辅助驾驶系统。
该系统在第一代XPilot系统的基础上进行了全面升级，增加了城市路况下的全程智能辅助驾驶功能（城市NGP），以及高速NGP和VPA记忆泊车的增强版功能。XNGP系统是目前国内唯一一款能够实现城市路况下全程智能辅助驾驶的系统，具有高度的自主性和智能化水平。
XNGP系统硬件搭载包括两颗激光雷达、双NVIDIA DRIVE Orin超级计算平台、13个摄像头、12个超声波雷达、5个毫米波雷达和1个车内摄像头等。其中，双NVIDIA DRIVE Orin超级计算平台的算力达到了480TOPS，为自动驾驶系统提供了强大的数据处理和决策能力。
核心功能：
1）城市NGP
城市NGP是XNGP系统的核心功能，它实现了在城市道路中的自动跟随、自动变道、自动超车、自动调整限速、自动通过红绿灯等功能。这一功能将高速领航辅助系统扩展到了复杂的城市环境中，使得车辆在城市中也能实现点到点的无接管驾驶。
城市NGP通过高精度地图、激光雷达、摄像头、毫米波雷达和超声波雷达等多种传感器融合感知技术，对周围环境进行精确感知和实时分析。同时，系统还具备强大的数据处理和决策能力，能够实时规划出最优的行驶路径，并自主执行驾驶操作。
2）高速NGP增强版
高速NGP增强版在原有基础上进行了优化和升级，使得车辆在高速道路上的自动驾驶体验更加出色。该功能实现了自动变道、自动超越慢车、自动进出匝道、自动调整限速等功能，大大减轻了驾驶员的驾驶负担。
高速NGP增强版通过更先进的算法和更强大的硬件支持，提高了系统的识别能力和响应速度。同时，系统还具备大数据训练能力，能够不断优化自身的驾驶策略和性能表现。
3）VPA停车场记忆泊车增强版
VPA停车场记忆泊车增强版实现了车辆在停车场中的自动寻找空位、自动泊入泊出、自动记忆常用停车位等功能。这一功能不仅提高了停车的便捷性，还降低了停车过程中的安全风险。
VPA停车场记忆泊车增强版通过高精地图和传感器融合感知技术，对停车场环境进行精确感知和实时分析。同时，系统还具备智能调节车速、智能转弯、智能绕行障碍物等功能，确保车辆在停车过程中的安全性和稳定性。
系统优势：
1）XNGP系统已经实现了全国范围内的覆盖，用户可以在任何城市使用该系统。同时，系统还具备不依赖高精地图的能力，能够在没有高精地图的情况下实现自动驾驶功能。
2）XNGP系统不仅适用于城市道路和高速公路等常见场景，还适用于掉头、环岛及狭窄小路等复杂路况。这使得系统在实际应用中具有更高的灵活性和适应性。
3）XNGP系统具备持续进化的能力，通过不断的数据积累和算法优化，系统的性能和功能将不断提升和完善。
2. AI小P｜大模型的进化
天玑系统中的AI小P更加「人性化」「情感化」了，它由全域大语言模型赋能——接入XGPT大模型，实时联网提供用各类陪伴式服务。
更强的交互：
1）高级理解与推理
AI小P最大的亮点在于其基于大模型融合的更高级别的对话理解+推理能力。
小P在与用户对话时不再局限于精确的描述，能够更好地理解用户的感受和需求，并提供相应的服务。例如，当用户说“我有点冷”时，AI小P能够识别出用户的感受并自动打开座椅加热功能；当用户说“车里有点闷”时，AI小P会关闭空调并打开窗户以改善车内空气流通。这种自然流畅的交互方式让AI小P变得更加人性化和智能化。
2）多模态交互能力
除了语言交互外，AI小P还具备多模态交互能力。
它可以结合图像识别等技术为用户提供更加丰富的交互体验。例如，用户可以通过语音指令让AI小P根据主题创作童话故事并生成图片；或者通过摄像头信息输入让AI小P帮助识别车辆信息、路牌信息等。
3）全场景覆盖
官方称，AI小P的应用场景几乎覆盖了车内的所有功能和界面。用户可以通过语音指令来操作大屏上的各种功能和界面，也可以一语直达任何想要达到的界面。同时，AI小P还能区分指令是来自主驾还是副驾，从而更准确地为当前说话人提供服务。
3.AI保镖｜感知、预警、防撞多环节保障
全场景影像与感知识别：
AI天玑系统利用先进的感知技术，将场景感知范围扩大至1.8个标准足球场大小，可精准识别50+个目标物；
同时，该系统还具备全场景影像功能，能够实时捕捉并显示车辆周围的画面，帮助用户更直观地了解车辆周围的情况，小到井盖、路障，都能够实时显示到位。
实时预警+提醒：
1）绿灯起步提醒
当车辆处于停止状态且前方绿灯亮起时，AI保镖会及时提醒用户起步，避免因分心而错过绿灯。
2）开门预警
在车辆行驶或静止状态下，如果检测到有行人或车辆靠近车门即将打开的区域，AI保镖会立即发出预警，防止开门时发生碰撞。
3）加塞/行人横穿提醒
在行驶过程中，如果检测到有车辆试图加塞或行人突然横穿马路，AI保镖会立即提醒用户注意避让。
4）障碍物靠近提醒
当车辆周围有障碍物靠近时，AI保镖也会及时发出提醒，确保用户有足够的时间做出反应。
哨兵模式：
天玑系统的AI保镖功能还具备哨兵模式，该模式能够24小时在线记录车辆周围的情况，并在检测到异常情况时立即发出警报。这不仅可以防止车辆被盗或损坏，还能为用户提供及时的帮助和支持。
▍未来可期？还是再一次的“假大空”？
作为国内首个量产上车的端到端大模型，小鹏汽车的天玑系统包括神经网络xnet、规控大模型xplanner和大语言模型xbrain，这些模型通过海量数据训练，不断提升驾驶策略的拟人化水平，提高舒适性和安全性。
“量产”、“端到端”这两个招牌无可厚非堪称“中国智驾的一大标志”，但实车体验与可持续发展才是用户们最关注的。
我们不能不去承认小鹏汽车已经走在前列，但最前列的前方依旧是一条未见终点的长路。
©️【深蓝AI】
撰文｜Los
本文仅做学术分享，如有侵权，请联系删文。
3D视觉交流群，成立啦！
目前我们已经建立了3D视觉方向多个社群，包括
2D计算机视觉
、
最前沿
、
工业3D视觉
、
SLAM
、
自动驾驶
、
三维重建
、
无人机
等方向，细分群包括：
工业3D视觉
：相机标定、立体匹配、三维点云、结构光、机械臂抓取、缺陷检测、6D位姿估计、相位偏折术、Halcon、摄影测量、阵列相机、光度立体视觉等。
SLAM
：视觉SLAM、激光SLAM、语义SLAM、滤波算法、多传感器融合、多传感器标定、动态SLAM、MOT SLAM、NeRF SLAM、机器人导航等。
自动驾驶：深度估计、Transformer、毫米波|激光雷达|视觉摄像头传感器、多传感器标定、多传感器融合、自动驾驶综合群等、3D目标检测、路径规划、轨迹预测、3D点云分割、模型部署、车道线检测、Occupancy、目标跟踪等。
三维重建
：3DGS、NeRF、多视图几何、OpenMVS、MVSNet、colmap、纹理贴图等
无人机
：四旋翼建模、无人机飞控等
2D计算机视觉
：图像分类/分割、目标/检测、医学影像、GAN、OCR、2D缺陷检测、遥感测绘、超分辨率、人脸检测、行为识别、模型量化剪枝、迁移学习、人体姿态估计等
最前沿
：具身智能、大模型、Mamba、扩散模型等
除了这些，还有
求职
、
硬件选型
、
视觉产品落地、产品、行业新闻
等交流群
添加小助理: dddvision，备注：
研究方向+学校/公司+昵称
（如
3D点云+清华+小草莓
）, 拉你入群。
▲长按扫码添加助理：cv3d008
3D视觉知识星球
「
3D视觉从入门到精通
