理想汽车全新一代智能驾驶技术架构端到端+VLM系统正式全量推送

汽车 2024-10-23 18:00 上海

10月23日，理想汽车行业首创的全新一代双系统智能驾驶解决方案端到端+VLM（视觉语言模型），随OTA6.4版本车机系统向理想L系列AD Max用户和理想MEGA用户进行全量推送，标志着理想汽车智能驾驶正式进入AI大模型时代。本次OTA更新重点围绕智能驾驶能力升级，智能空间和智能电动也同步更新，为理想L系列和理想MEGA用户带来更全面的智能出行体验。

智能驾驶方面，基于理想汽车一直以来对安全的重视，不断对双系统架构进行打磨验证，历经千人到万人的多轮测试，如今理想汽车智能驾驶行驶里程已超过25亿公里，超过80%用户使用NOA驾驶，30万以上车型AD Max订单占比超过70%，训练算力达到5.39亿Eflops。此外，得益于理想汽车的投入产出效率以及世界模型在云端的提前部署，目前双系统架构可实现一周两个版本的高效迭代，领跑业内。此次全量版本基于最新的V4.8.6模型，增加城市场景数据配比，提升了超车场景理解能力、导航信息理解能力、障碍物检测精度、停止线检测能力，真正实现像人一样思考，像老司机一样驾驶，场景全覆盖、行驶更舒适、通行更高效，智能驾驶产品价值再度进阶。

端到端模型拟人化程度再上新台阶，驾驶习惯媲美老司机

理想汽车端到端+VLM是集成了真正意义上的One-Model结构端到端模型+全球独创的VLM视觉语言模型，且率先将视觉语言模型VLM部署到车端芯片上的双系统方案，从创新技术阶段到实际落地，智能化、拟人化、稳定性程度持续稳步提升。

本次OTA6.4全量版本在端到端方面，新增路边起步、U形掉头、环岛通行功能，增强了拥堵路况下的变道、绕行、避让；复杂路口的精准选道；车辆或行人切入横穿场景下的识别反应等能力。真正实现城区场景无断点、复杂环岛可通行、U型掉头轻松过，拥堵博弈更自信、原地P挡能开启，为用户提供更加便利畅快的智能驾驶体验。

当处于路边起步场景时，端到端模型会直接输出轨迹，使用更强的可行驶区域规划，不再强依赖车道关系。即使车辆不在车道中，也可以启发式搜索出一条从路边驶入主路的路线，实现P挡状态下双击拨杆直接起步，无需在车道内启动。得益于端到端强大的感知能力，可以更准确识别和预测周围障碍物的行驶轨迹，从而保证路边起步的安全性，起步过程中环顾周围判断危险，自主礼让、避让等。

端到端模型基于人类司机数据训练，具备更强的复杂道路结构的理解能力。例如在不同的U型掉头场景中，都能输出合理轨迹，不再强依赖于导航信息和道路拓扑以及人工定义的规则去选择合适的路线。更强的侧向感知能力实现“看得远、看得准”，在掉头过程中，可以更准确识别和预测对向直行车辆的行驶轨迹并做出避让动作，在环岛通行中可以更准确识别和预测旁侧切入车辆的行驶轨迹并进行合理博弈，进出环岛决策更果断，出口选择更精准。

此外，端到端还通过学习各种驾驶场景下的大量老司机数据，依赖纯模型式的算法，实现更拟人的加塞和蠕行博弈动作，在遇到前车减速的情况下会直接绕行蠕行通过；在复杂路口的无保护左转场景，精准把握车流空档，主动选择车流量更小的车道；由于端到端从感知到控制的时延更低，在遇到车辆或行人切入及横穿场景时，具备快速反应、及时减速的能力，兼顾安全和通行效率。

VLM视觉语言模型实现遵守交规，通行更加合理高效

截止目前，理想汽车在端侧部署的VLM视觉语言模型已拥有22亿参数量，对物理世界的复杂交通环境具有更拟人的理解能力，即使面对首次经历的未知场景也能自如应对。随着OTA6.4版本的正式推送，VLM视觉语言模型也迎来了重大更新，通过对大量人类老司机的驾驶数据、特殊车道场景的驾驶行为、驾驶过程中的困难场景进行学习，从而获得遵守交规、识别道路上的中文信息并深刻理解中文语义、识别潮汐车道和通行状态的能力，辅助端到端完成完整驾驶循环。

例如在限时公交车道，可轻松理解上方路牌限行信息文字和公交车道黄线识别，并对应做出执行控制；可识别潮汐车道和可变车道，以及可通行和禁行的状态标识，并正确选择车道通行；在丁字路口场景会主动采取防御性减速，避免以往在丁字路口场景，入弯偏快带来的不安全感；可识别减速带、坑洼路面、夜晚无灯、学校路段、施工场景、主辅路进出等场景并提前减速，同时通过语音/EID/UI交互等进行告警；在主辅路/高架场景下，可识别并理解自车所在位置为主路/辅路、高架上/下，纠正导航偏移，保障路线选择准确性。

不仅如此，OTA6.4版本还优化了高速NOA功能，在高速&城市快速路场景，针对前方慢车，具备更早识别、果断发起超车动作，更高效更安全。

双系统交互体验全新升级，用户体验更加便利

除了双系统在智能驾驶功能方面的重磅升级，用户交互体验方面也迎来了全新体验。OTA6.4全量版本推送后，理想汽车端到端+VLM智能驾驶双系统在车机交互页面展示更加清晰全面，系统的“所见所想”实时交互，让智驾全程可理解更安心。

系统1“快思考”的端到端模型文字弹窗相比无图NOA版本更加丰富更加易懂，实时交互按导航、交规、效率、博弈、注意提醒等相关的执行逻辑和动作。系统2“慢思考”的VLM视觉语言模型新增图文视窗，在特殊场景下，将前方感知到的画面投射到页面内，配合文案讲解模型的思考过程和结果。让用户在实际用车过程中，对于双系统智能驾驶功能“看得见、摸得着”，切身感受到双系统的智能与便利。

智能空间“玩转任务大师”

智能空间方面，理想汽车始终聚焦用户价值，以用户体验为核心，通过AI人工智能加持，打造智能座舱体验标杆。OTA6.4版本新增任务大师2.0，全面接入理想同学和Mind GPT能力，大模型加持下的任务大师更智能、更全面。

导航地图升级到高德 AutoSDK 750版本，新增绿波车速、路口会车预警、绿灯倒计时功能，升级地图3D视觉效果，地图更强大。另外，当导航中发起沿途搜时，可通过触控+语音任意指定搜索关键词，针对指定类型的沿途搜具备精细筛选，例如充电站搜索时可以筛选品牌、功率，加油站搜索可以筛选品牌。出行类问答结果会在理想同学语音框中生成语音地图卡，结图文结合，展示更形象。此外，还新增了桌面卡片区间测速显示、智能通勤卡开关。

高德 AutoSDK 750版本地图界面

理想同学新增表情包和眼神追踪，新增思考、开心、疑惑表情，在阵列mic加持下，理想同学眼神可跟随发音人位置移动；理想同学语音模型也进行升级，离线语音接近在线效果，英文播报更自然；理想同学车控响应速度再度提升10%-20%；娱乐助手新增娱乐应用内容点播语义直达；用车助手新增OTA相关问答及操作指令。

MEGA车型新增舱内后视应用，随时查看后排儿童/乘客情况；MEGA车型新增二排右侧一键尊享座椅，一键开启极致乘车体验；L系列新增一三排对讲，高噪场景下依然轻松对谈。

理想MEGA二排尊享座椅

智能电动新增超充报告和充电站功率区间筛选器

智能电动方面，随着理想超充站越来越多，超充报告自然也不能落下。新增理想4C/2C/优选站超充报告。充电完成后自动生成超充报告，纯电/增程车型均可查看本次充电详情，充电时长、里程、峰值功率、平均功率等信息一目了然。可一键发送至手机，查看、保存、分享一气呵成；

同时新增充电站功率区间筛选器，筛选调节更直观，方便查找合适的充电站，高效稳定，实现城区、高速充电无忧。

超充报告

充电站功率区间筛选器

100万辆车对智能驾驶来说是一个非常关键的指标，近日，理想汽车已完成第一百万辆交付。同时，得益于理想汽车长期坚持核心技术自研，不断加码研发投入，这一次，理想汽车行业首创的全新一代智驾解决方案端到端+VLM也迎来了全量推送的重磅里程碑时刻。自此，理想汽车智能驾驶正式迈入AI大模型时代，将为百万理想用户带来更舒适、更全面、更高效的智能驾驶出行体验。未来，理想汽车还将在智能驾驶、智能电动、智能空间等方面全方位持续发力，向着成为全球领先的人工智能企业，为更多用户创造移动的家、创造幸福的家而不断努力。

http://mp.weixin.qq.com/s?__biz=MjM5MDk1MTcwMA==&mid=2649842691&idx=2&sn=a94dc1aeb1744e6996c38def5bd040ee

EAST汽车

EAST汽车以资讯为纽带，为每一个普通购车用户、车主提供权威、丰富的汽车行业动态、实用有效的导购信息。

最新文章

智能体验再度进阶，MG7 2025款上市，限时一口价11.29万元起

通用汽车成立凯迪拉克F1车队并将推出动力单元

极氪MIX成为上海汽车博物馆收藏的首台智能纯电汽车

Jeep将采用STLA Frame平台，加速电气化转型

仰望商业研究院成立与企业家用户共谋发展

10月车市销量：比亚迪单月销量破50万，多家车企创历史新高

捷豹路虎中国荣膺2024年度英国商业大奖“最佳英国企业奖”

体验理想汽车“端到端”智驾，途经六个场景皆有心得

Honda 全固态电池示范生产线首次公开，开启电动化新篇章

节能、性能双突破，福特“大马力E混动”家族广州车展闪亮登场

广州车展上出现“不挂绿牌的新能源”，福特“大马力E混动”又劲又省不用桩

小鹏汽车发布三季度财报：毛利率同比提升18个百分点、营收环比增加24.5%

聚焦中国市场，大众汽车智启未来新篇章

新款保时捷 Taycan 后驱版启动中国预售

品质如一，守护如初沃尔沃汽车官方二手车业务上线10周年

寻味之旅实录：顺风顺水食在顺德，且与ID. 与众“金”彩共赴

2024广州车展丨东道主与过江龙“包馆”，BBA皆有亮点，“一口价”频现

从电驱越野到智能硬派，方程豹豹8定义国货旗舰科技新标杆

全球标准成就的质价比之选，探店实拍北京现代第五代胜达

全家出行关键看舒适与安全，2025款锐界L焕新上市有看点！

用户信赖为本，高质量发展为核一汽红旗加速冲刺新能源赛道

全球首款4C超级快充插混MPV来了，传祺新能源E9超级快充版率先开打高端局

深度丨大环境下合资车企的应对，奥迪反向“师夷长技”

采访丨何小鹏：在人驾或低速行驶情况下，不需要激光雷达

2025款福特锐界L焕新上市，坚守品质底线不打折扣

激光雷达算什么？小鹏P7+上手AI视觉方案

ID.与众：4万现金优惠，老车主补偿

兼顾大马力和低油耗，蒙迪欧运动版大马力E-混动系统获评“中国心”十佳发动机

又大又稳又安全，MG ES5正式上市，增换购惊喜价9.99万元起

进博会看中国新质生产力：智能电动车、载人潜水器、人形机器人……

进博会全勤生丰田，全方位努力是他的常态

采访丨通用汽车中国公司总裁何思文：中国正走在世界的前沿

进博会看大众：大众汽车、奥迪、保时捷三大品牌齐聚，还有七款重磅车型

一汽-大众SUV阵容首款换代车型，全新探岳L焕新来袭

上海汽车以旧换新福利升级上汽大众助力换新更换优

蔚来ET7再度成为进博会官方指定用车

四项大奖！长安福特凭口碑成为J.D. Power 2024可靠性研究最大赢家

专访|吉利：为什么要放弃燃油车？双向深耕才能更稳向上

极氪009光辉高端圈层用户不断扩容胡润百富董事长胡润成为第1500位尊贵车主

移动“大平层”+宝宝巴士，比亚迪夏来势汹汹

年终车市收官倒计时，各车企全年目标完成得如何了？

卷技术、卷品质、卷服务，长安福特摘得2024中国燃油车用户满意度双冠

智驾有 “直觉” 智己汽车成为首个同时具备L2、L3、L4级智能驾驶量产能力的品牌

MAZDA EZ-6拆车大揭秘，合资车企开始反击了

奔腾小马长续航版上市，“社区巡逻车”续航达到222km

试驾广汽埃安AION RT，“全球车”设计超赞，智驾变道不够丝滑

方盒子冠军家族添猛将捷途山海T1上市

吉利“中国星”再进阶，东方曜双车上市

全新smart精灵5号上市：限量到手价22.99万元起

新车丨朱江评新款GV70：不念过往，不畏将来

分类

时事

民生

政务

教育

文化

科技

财富

体娱

健康

情感

旅行

百科

职场

楼市

企业

乐活

学术

汽车

时尚

创业

美食

幽默

美体

文摘

原创标签

时事社会财经军事教育体育科技汽车科学房产搞笑综艺明星音乐动漫游戏时尚健康旅游美食生活摄影宠物职场育儿情感小说曲艺文化历史三农文学娱乐电影视频图片新闻宗教电视剧纪录片广告创意壁纸头像心灵鸡汤星座命理教育培训艺术文化金融财经健康医疗美妆时尚餐饮美食母婴育儿社会新闻工业农业时事政治星座占卜幽默笑话独立短篇连载作品文化历史科技互联网

发布位置

广东北京山东江苏河南浙江山西福建河北上海四川陕西湖南安徽湖北内蒙古江西云南广西甘肃辽宁黑龙江贵州新疆重庆吉林天津海南青海宁夏西藏香港澳门台湾美国加拿大澳大利亚日本新加坡英国西班牙新西兰韩国泰国法国德国意大利缅甸菲律宾马来西亚越南荷兰柬埔寨俄罗斯巴西智利卢森堡芬兰瑞典比利时瑞士土耳其斐济挪威朝鲜尼日利亚阿根廷匈牙利爱尔兰印度老挝葡萄牙乌克兰印度尼西亚哈萨克斯坦塔吉克斯坦希腊南非蒙古奥地利肯尼亚加纳丹麦津巴布韦埃及坦桑尼亚捷克阿联酋安哥拉