作者 | 张马也
编辑 | 德新
在接下来很长一段时间内,「大模型对于自动驾驶,是颠覆性的变革,而不是比例上的优化。」
在当前硬件性能不变的情况下,「未来的12 - 18个月,要有10 - 30倍体验上的提高。」
甚至对无人驾驶的看法,「今年以前我觉得中国的全无人驾驶还要好多年。但今年端到端大模型开始上车测试,我们看到数据后,觉得机会就在不远的将来,也许在数年内就会看到更强力的无人驾驶的到来。」
感知大模型XNet:聚合动态XNet、静态XNet、纯视觉2K占用网络,能够让自动驾驶系统对现实世界中的可通行空间进行3D还原,清晰识别静态障碍物细节,感知范围提升2倍,面积有1.8个足球场大小,能精准识别50+个目标物。
大语言模型XBrain:通过大语言模型网络,提高自动驾驶对复杂甚至未知场景的泛化处理能力,及对宏观逻辑的推理能力,从而做出兼顾安全及性能的拟人驾驶决策。能够认识待转区、潮汐车道、特殊车道、路牌文字,理解各种令行禁止、快慢缓急的行为指令。
规控大模型XPlanner:基于图像数据的感知输入,实现对智驾行驶路径的规划控制。规划大模型基于数据驱动模式迭代,取代人类手写规则代码,使得驾驶策略向拟人进化,目前在效果上,前后顿挫减少50%、违停卡死减少40%、安全接管减少60%。
AI小P:升级了LLM的AI助理,具有感知、推理、理解复杂需求的能力,小鹏的XGPT大语言模型,整合了自研及第三方(阿里通义大模型、智谱AI大模型)LLM,将大模型的通用智能能力用于车载交互。
AI司机:包括AI代驾、AI泊车、XNGP等智能驾驶功能。
AI保镖:车辆环境的大范围感知及预警。