![]()
·智能座舱「叛逆」进化，成为你的「家庭新成员」
·原生流式多模态大模型、车载类人记忆框架、持续推理架构，绝影三大AI创新技术赋予座舱「有趣的灵魂」
站在AGI时代的门口，智能汽车产业迎来了前所未有的发展机遇。在这场技术驱动的变革中，商汤绝影以其深厚的AI技术积淀，正逐步释放科技的力量，推动智能汽车行业的跨越式发展。
在2024「绝影实力AI DAY」上，商汤绝影用领先的AI实力重新定义座舱，首发AI汽车创新产品「A New Member For U」（你的家庭新成员），让汽车拥有「有趣的灵魂」。
依托原生流式多模态大模型、车载类人记忆框架和持续运行框架等前沿AI汽车创新技术，商汤绝影打造的「家庭新成员」能够察言观色，无时不在，并且做到与你心有灵犀。
大模型上车伊始，它们主要扮演着工具的角色，为用户提供基础的信息查询和问题解答服务。比如当用户对车内的某项功能不熟悉或遇到故障时，可以简单地询问车机，它能够快速地提供解决方案，帮助用户解决特定问题。
随着技术的不断进步，具备逻辑思考和通用任务处理能力的AI Agent出现了，能够根据用户的指令，完成复杂的连续性任务，让座舱成为一个有能力的助手。但它依旧局限于被动服务，算不上真正「知你懂你」。
商汤绝影致力于让智能汽车向有情感、有温度的超级智能体进化，让汽车不再是冰冷的工具或者机械式的助手。这就需要让智能座舱进行一次「叛逆」进化。
「叛逆」是指一种突破。AI汽车的智能座舱不再只是个听话的工具，循规蹈矩的助手，而是能够主动学习，自我进化。未来，它会将每一次交互转化为宝贵的记忆，逐渐形成对用户的深度理解。在知情允许之下，座舱能记住你的偏好，比如喜欢的温度、常去的目的地以及更多个性化细节，并提供主动服务，它还会持续迭代、自我成长，真正拥有「有趣的灵魂」。
![]()
为此，商汤绝影打造了「A New Member For U」(你的家庭新成员)，让智能汽车能够察言观色，时刻准备着主动提供专属服务，成为真正懂你、与你心有灵犀、生活中不可或缺的「家庭新成员」。「家庭新成员」会察言观色，关心你和你身边的一切，感知你的情绪，理解你的需求。而且它真正懂知你所想，是和你心有灵犀的伙伴和家人，让用户感到温暖贴心，当然也不会盲目打扰。同时，它在车上会不停记忆、不停思考、不停规划，每分每秒都准备着为你服务。例如，在旅途中，后排的孩子睡着了，「家庭新成员」会主动把空调温度升高、音乐的声量调低，底盘和驾驶模式都调整为舒适模式，给小朋友一个舒适安心的睡眠环境。这不需要用户下指令，而是它观察到了，思考和推理之后，主动的服务。既不打扰，又有温度。「家庭新成员」能够察言观色，离不开商汤绝影强大的原生流式多模态大模型，在OpenCompass多模态评测榜单中，绝影多模态大模型的理解和推理能力位列第一。绝影的多模态大模型能够综合理解文本、图像、音频、视频、3D等信息模态，包括人的表情、语气等，做到全场景的多模态感知。不止如此，商汤绝影还针对车载场景进行定制，融合车端感知数据、车端场景针对性训练。因此，New Member「家庭新成员」能全面感知用户在车内的信息和需求，以及周围环境数据，并进行深度理解和推理思考，具备理解世界、理解人类的能力。除了强大的感知和理解能力外，要成为「家庭新成员」，汽车必须要有「记忆」。对人类来说，记忆很重要，因为它是认知功能的核心，也是情感的基础和连接的纽带。《初恋五十次》是一部很经典的电影，讲述的就是和记忆有关的故事。电影里男主爱上了患有短期记忆丧失的女主。女主每天醒来都会忘记前一天发生的事，因此男主每天都用不同的方法重新追求她，让她爱上自己。电影结局是美好的，爱能够跨越失去「记忆」的阻碍，当然，「记忆」的重要性也在故事被突显出来。智能汽车也是类似的，有了「记忆」，车辆才能与你会产生默契，不断成长，直到与你心有灵犀。![]()
商汤绝影打造了国内首个「车载类人记忆框架」，与人类的记忆机制非常相似，包括临时记忆、长期记忆和场景记忆三部分，三者结合让系统实现类人的记忆能力。临时记忆，能记得一些瞬时信息，比如车里的物品、人的搭配、有没有系安全带等；也有长期记忆，就像是一个「档案库」，存储用户的基本信息、行为模式和偏好等，它可以自我迭代，能从用户长期使用中总结规律并不断优化。场景记忆或者说工作记忆，是通过从临时记忆和长期记忆中提取重要信息，对这些信息实时处理和分析，作出决策或者解决问题。例如，车内的小朋友看到路上其他小孩吃棉花糖，拿出棒棒糖想偷吃，New Member「家庭新成员」看到了这个小动作，「记得」小朋友刚看完牙医，不能吃糖，进行主动提醒。此外，商汤绝影还打造了能够持续推理的Always-on运行框架，能够将多模态感知到的信息与各种记忆相结合，进行高效的处理和反馈，做到时刻感知需求，主动为用户服务。通过零拷贝技术和端侧部署，「新成员」的系统数据延迟控制在1毫秒以内，端侧也能快速响应，目前首包耗时最短仅需60毫秒，推理速度40Tokens/秒。在追求智能和情感化的同时，商汤绝影始终坚持将用户隐私与安全放在首位，通过全方位的隐私保护与数据安全体系，确保系统在安全合规的前提下提供极致体验，为每一位用户打造专属的安全空间。「家庭新成员」不仅是商汤绝影技术创新的又一里程碑，更是智能汽车持续向前进化的重要一步。未来，每一台车都能拥有「有趣的灵魂」，智能汽车行业将迎来一个充满无限可能的新时代。![]()
