2025年01月07日
大联大品佳2025年01月07日
安波福2025年01月07日
艾迈斯欧司朗2025年01月07日
电动车税收2025年01月07日
Mendix 低代码平台
2025年01月06日
达索
2025年01月06日
海克斯康
2024年12月30日
云计算
2024年12月30日
海克斯康
2025年01月07日
新思科技
2025年01月07日
欧姆龙
2025年01月06日
德国GMCI
2025年01月03日
海克斯康
2025年01月03日
宜科
想象一下,当你一天的疲惫工作结束,回到车里,等待你的不再是冰冷的按钮和呆板的语音助手,而是一位温暖的“家人”——它主动关心你的需求,甚至用一句贴心的问候让你的心情舒缓。这不是未来的想象,而是商汤绝影对于智能座舱的革新。
只是从工具到助手,还远远不够,座舱需要一次「叛逆」进化
现在智能汽车的功能越来越多,涉及的场景越来越新,支持的科技功能也越来越强, 但如何让车主乘客能够自然地体验到这些新功能带来的价值,其实并不容易。
现在大部分智能座舱都装配了语音识别系统,用户可以通过语音下达指令,但车主必须得学会怎么和车交流,简单的功能比较容易,比如:帮我打开空调,打开车窗,播放音乐等。但是复杂的功能就需要分解成不同的子命令,例如预定酒店,就要打开软件,输入目的地,挑选价格等一系列操作,用户需要一个一个指令下达,比较繁琐。
大模型进车后,首先是带来的是语言的泛化能力,简单功能可以通过非常接地气的话语去触发,比如:有点冷了,把温度调高些,大模型会推理出要打开空调。当然这还是属于工具的属性,只是更加智能。
随着技术的不断进步,具备逻辑思考和通用任务处理能力的AI Agent出现了,能够根据用户的指令,完成复杂的连续性任务,让座舱成为一个有能力的助手。
具体来看,面对一些复杂的问题,大模型可以通过AI Agent的方式,主动识别出需要分几步实现,然后一步一步实现,还可以通过反思的方式,改变不同的实现策略,不停尝试直到完成整个任务。
但它依旧局限于被动服务,都需要车主和乘客有主动的需求,车主首先需要知道要什么,但很多新的场景和体验车主可能都不知道如何描述,甚至连有没有都不知道,算不上真正「知你懂你」。
商汤绝影致力于让智能汽车向有情感、有温度的超级智能体进化,让汽车不再是冰冷的工具或者机械式的助手。这就需要让智能座舱进行一次「叛逆」进化。
「叛逆」是指一种突破AI汽车的智能座舱不再只是个听话的工具,循规蹈矩的助手,而是能够主动学习,自我进化。未来,它会将每一次交互转化为宝贵的记忆,逐渐形成对用户的深度理解。在知情允许之下,座舱能记住你的偏好,比如喜欢的温度、常去的目的地以及更多个性化细节,并提供主动服务,它还会持续迭代、自我成长,真正拥有「有趣的灵魂」。
为此,商汤绝影打造了「A New Member For U」(你的家庭新成员),让智能汽车能够察言观色,时刻准备着主动提供专属服务,成为真正懂你、与你心有灵犀、生活中不可或缺的「家庭新成员」。
「你的家庭新成员」New Member的变革在哪里?
全新的「服务找人」体验。「服务找人」并不是一个新的概念,以前在互联网车的时代也提过,但需要服务预先被定义好,然后在合适的场景触发,也就是通过定义好的规则触发。但前面也提及,现在功能越来越多,用户对于功能的了解和掌握不一定完善;另一方面,除了常用的一些功能,驾乘人员自己也不知道怎么下达指令,来触发规则。
现在的New Member同样也是「服务找人」,但它能够通过商汤绝影的原生流式多模态大模型,主动识别各种场景,主动推荐合适的服务给车主和乘客。部分体验类似,但背后的方式不一样,以前是规则驱动,现在是数据驱动。
New Member的「服务找人」是基于AI大模型的感知和推理模式,不需要提前定义好服务。大模型会通过对场景数据和记忆数据的融合,进行全时感知,推理出用户需要的服务内容,同时自动构建实现服务的方案和途径,再通过主动交互的方式和用户进行沟通,实现整套服务找人的过程。
New Member是专为用户车辆设计的智能AI系统。它会持续收集并分析与用户、车辆、周围环境以及随车物品相关的数据,并将这些信息「记忆」下来。利用这些记忆和判断能力,New Member可以在合适的时机主动给出建议和帮助,不需要用户事先告诉它该怎么做。
不同的人、不同的车,以及不同的使用场景都会让New Member为用户定制独特的服务方式。简单来说,它就像为智能汽车注入了一个独特且丰富的灵魂,这个灵魂只属于你,会不断进化,让你的出行体验更加贴心、有趣和个性化。
举一个出行相关的例子:每次用车的时候,New Member可以提前根据以往用车的习惯,以及车主和乘客进车的穿着,表情,携带的东西等等,推测出可能的目的地以及要做的事情。 比如:周六下午5点,车主和儿子一起进车,根据以前的行程记忆,New Member会推测出车主会陪儿子去打羽毛球。New Member可以主动设置导航目的地,还可以根据物品的记忆确认车主和孩子是不是带了该带的衣服和装备,甚至可以做一些专业性的推荐。
也就是说,New Member可以在不知不觉中给用户带来驾乘体验的升维,这依赖于三个关键能力:察言观色,无时不在,心有灵犀。
「家庭新成员」会察言观色,关心你和你身边的一切,感知你的情绪,理解你的需求。而且它真正懂知你所想,是和你心有灵犀的伙伴和家人,让用户感到温暖贴心,当然也不会盲目打扰。同时,它在车上会不停记忆、不停思考、不停规划,每分每秒都准备着为你服务。
New Member背后的三大技术支撑
依托原生流式多模态大模型、车载类人记忆框架和持续运行框架等前沿AI大模型技术,商汤绝影正在引领座舱交互体验的革新,让智能汽车拥有「有趣的灵魂」。
New Member「新成员」能够察言观色,离不开商汤绝影强大的原生流式多模态大模型。在OpenCompass多模态评测榜单中,绝影多模态大模型的理解和推理能力排名第一,以此为基础,「家庭新成员」能全面感知用户的语音、表情、手势、以及环境数据,并进行深度理解和推理思考,具备理解世界、理解人类的能力。
这位「家庭新成员」能够感知和理解用户需求,提供有温度、有情感的主动关怀。可以畅想这么一个场景:在驾驶旅途中,「家庭新成员」注意到坐在后排的孩子睡着了,就会主动把空调温度升高、音乐的声量调低,底盘和驾驶模式都调整为舒适模式,给小朋友一个舒适安心的睡眠环境。
如果要让汽车与用户心有灵犀,它还必须有拥有「记忆」,因为记忆是人类认知的核心,也是情感联结的基础。为此,商汤绝影打造了国内首个「车载类人记忆框架」,让系统实现类人的记忆能力。
商汤绝影的记忆框架与人类的记忆机制非常相似。它有临时记忆,能记得一些瞬时信息,比如车里的物品、人的搭配、有没有系安全带等;也有长期记忆,就像是一个“档案库”,存储用户的基本信息、行为模式和偏好等,它可以自我迭代,能从用户长期使用中总结规律并不断优化。而通过场景记忆,车机能针对当前场景进行毫秒级的动态记忆检索,提取关键信息,进行决策,主动服务。
例如,车内的小朋友看到路上其他小孩吃棉花糖,拿出棒棒糖想偷吃,New Member「家庭新成员」看到了这个小动作,「记得」小朋友刚看完牙医,不能吃糖,进行主动提醒。
合格的「家庭新成员」还要无时不在时刻准备为你服务,绝影打造了能够持续推理的Always-on运行框架,将多模态感知到的信息与各种记忆相结合,依托端云协同架构,数据延迟控制在1毫秒以下,首包延时最快只需60毫秒,推理速度达40 Tokens/秒,对数据进行高效处理和反馈,时刻感知需求,主动为用户服务。
在追求智能和情感化的同时,商汤绝影始终坚持将用户隐私与安全放在首位,通过全方位的隐私保护与数据安全体系,做到“数据跟人走”、“隐私数据不出车”、“不该说的不说”,确保系统在安全合规的前提下提供极致体验,为每一位用户打造专属的安全空间。