车载AI大模型设计 | 未来驾驶体验
文摘
汽车
2024-08-24 21:14
河北
随着人工智能技术的飞速发展，车载AI大模型在智能座舱中的应用日益广泛，为驾驶者和乘客带来了前所未有的便捷与智能体验。在本文中，我们将结合应用场景来谈谈车载AI大模型的应用。车载AI大模型是一种基于深度学习技术的大型人工智能模型，专为汽车智能化设计。它由庞大的神经网络构成，能够自动从海量数据中提取并学习有用信息，具备高准确性、高效性和高通用性。经过训练，这些模型能够处理语言、图像、语音等多种信息，并在自动驾驶、智能座舱等领域发挥关键作用。可想而知，当踏进智能座舱时，我们将拥有一个能够读懂人心的伙伴，它可以通过深度学习来了解我们的驾驶习惯、情绪变化乃至生活偏好，为用户量身定制每一次出行体验。通过AI大模型的赋能，语音助手能够更精准地捕捉用户意图，输出自然、流畅且逻辑清晰的回答与建议。在AI大模型的赋能下，语音助手变得更加智能化和情感化，能够识别用户的复杂指令和情绪变化，提供更加个性化的服务。此外，智能座舱还可以实现多模态融合交互，如语音+手势、面部+情绪等，进一步提升用户体验。小米自研的AI大模型不仅可以针对模糊指令进行操作，还可以与用户对话，比如，“我的手机在哪儿？”“把家里的灯关掉”“前面的山是什么山？”“前面的车是什么车？”等帮助用户介绍路途周边信息，智能识别周围车型类别，在车上也可以随时调用家里摄像头等。除此之外，如文本生成、车辆状况解答等功能都不在话下。接下来，小米还将上线MiLM 大模型，据说将会带来全新的体验。蔚来推出的NOMI GPT，具备强大的语义理解和生成能力，能够为用户提供大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答以及AI场景生成等全新交互体验。同时，NOMI GPT还具备情感识别能力，能够感知用户的情绪变化，并据此提供更加人性化的服务。此外，NOMI GPT还支持多模态交互，能够综合处理语音、视觉等多种类型的数据，更加智能化。除此之外，其用车问答功能相当于给NOMI内置了一个用车手册，这一功能支持几乎所有车辆信息、用车知识的查询。极越的SIMO智能交互系统具有多音区识别功能，能够支持四个座位同时进行语音交互，另外，还支持“主驾免唤醒”、“连续说”、“全场景”、“车外语音”功能，比如，用户坐在车内，可以随时询问SIMO，哪里有景点，哪里有加油站等生活信息，甚至还能够根据电视剧情节，询问这是哪一集。另外，它还支持车外语音控车、泊车等。除此之外，SIMO还能帮助解决各种用车问题，如怎么打开手套箱，甚至还能生成文字、图片信息并与极越APP互动分享。比亚迪的璇玑 AI 大模型，不仅可以像理想同学那样实现临时的路线规划和全车车控，同时还新增了多车畅联的功能。而吉利的星睿AI大模型则可以根据语音指令完成转向、平移、放倒的AI智能座椅，以及AI全景声环绕音响等创新功能。长安星海大模型的智慧语音，可以提供用车指南、情感闲聊、车载百科全书等功能。比如，我们可以问小安“昨天有哪些汽车新闻？”“小安，我今天情绪不好”“小安，一会儿记得提醒我女儿换尿不湿”等等多场景DIY。除此之外，在学习方面，其可以设置AI场景自学习，还可以回答各种天文地理、稀奇古怪的问题，是不是很酷呀！说到百科全书，我们就不得不说说理想Mind GPT大模型的设计，它不仅可以听懂一连串的指令，甚至可以根据你的描述来现场作画，更具备了知识问答、文本生成、逻辑推理、记忆网络和用户语言界面生成能力，完全可以当做“大百科”来使用了，这是不是意味着学生们可以在路上就有了一位辅导老师呢？华为享界S9的AI盘古大模型和问界类似，它可以通过简单指令，来帮车主解读复杂的仪表信息和回答各类车辆知识的能力。比如说，车子仪表上此时亮起一个故障灯，你就可以直接问小艺，“小艺小艺，车子现在有什么问题？”它就会自动识别车辆状况并反馈。据说，小米本地部署的“MiLM-1.3B”全链路大模型语音交互，也可以辅助小爱同学进行车内AI绘画呦！自动驾驶是车载AI大模型的另一大应用场景，大模型可以处理复杂的驾驶决策任务，包括路径规划、障碍物识别、车辆控制等。通过不断学习和优化，自动驾驶系统可以逐步提升驾驶安全性和舒适性。同时，大模型还可以与车辆传感器、高清地图等数据进行融合处理，实现更加精准的驾驶决策。小鹏AI天玑系统的AI代驾和AI泊车功能可以模仿你的驾驶风格处理实际问题，以实现“一键上班”、“一键回家”。而其AI保镖则可以识别含井盖、悬挂路牌等50+目标，以提前预警潜在风险。吉利、昊铂、蔚来等车企的AI数字底盘设计，可以为用户实现更安全的驾驶体验。昊铂的全新一代的智慧数字底盘，可以实现虎式调头等高难度动作，并对路况进行判断，以帮助车辆更好运行；吉利的数字底盘则可以实现诸如无人自动高速漂移、四轮转向、侧碰主动防御、涉水主动调节高度、主动迎宾、敏捷出库、跳舞、坦克掉头等功能。通过综合处理语音、视觉、触觉等多种类型的数据，大模型能够更全面地感知乘客和驾驶员的需求，提供多模态且更专业化的服务。比如，在驾驶员视线离开路面时，系统能够通过面部识别技术检测到这一行为，并自动降低音量或暂停播放音乐，以避免分散驾驶员的注意力，在紧急情况下，系统还能通过震动座椅等方式提醒驾驶员注意。极越的SIMO系统通过语音+头姿、面部+情绪等多种融合交互方式，实现了更加自然、流畅的人机交互体验。用户可以通过点头、摇头等方式对语音指令进行确认或否定，或者通过面部表情识别来触发特定的座舱功能。蔚来NOMI GPT的上线，支持多模态交互，能够综合处理语音、视觉等多种类型的数据，为用户提供全方位的智能化体验。在多模态感知的能力下，NOMI融合了图像、音频、车身传感器等多模感知，它可以像朋友一样，看见你的物品、着装、状态，甚至舱外的车辆、楼宇、动物植物，并以更自然的语言去表达。结合用户的行为习惯和个人偏好，车载AI大模型能够实现智能座舱的个性化定制。例如，系统可以根据用户的驾驶习惯、体态和行为等自动调整座椅位置、后视镜角度等；在娱乐方面，系统可以根据用户的音乐偏好，创建个性化的播放列表；在氛围营造方面，系统还能根据用户的喜好和心情，调整车内的灯光、温度等环境参数。理想汽车发布的Mind GPT大模型，可以为用户提供更加个性化的语音交互服务。它可以根据用户的声纹识别身份，并根据历史记录推荐喜欢的音乐、导航路线等。据说，蔚来NOMI GPT的AI场景可以记录用户用语义创建场景需求。并能够根据对应的驾驶人、时间、环境激活这些定制化的场景。比如说 “给我设置一个工作模式：工作日早上我上车就自动导航去公司，打开NIO Radio，下午如果我上车的时间在晚上7点之后，就开座椅按摩、氛围灯要放松一点的、然后把自定义歌单打开，5分钟以后再开回家的导航”。极氪推出的ZKEER AI OS系统，可以在起步时主动检测车身周围，并提醒用户。当我们在进入隧道后，它会主动询问用户是否要关闭车窗并开启内循环等等。综上所述，车载AI大模型在智能座舱中的应用极大地提升了驾驶者和乘客的便捷性与智能体验。但过度依赖AI，是否会让人类驾驶员逐渐丧失驾驶技能？泄露隐私呢？![]()
