时间: 2024-04-15 04:56:58 作者: 智能座舱域产品
蔚来NOMI GPT端云多模态大模型正式上线,并同步对搭载Banyan·榕智能系统的车型陆续开启推送。用户在升级NOMI GPT功能后,能体验到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的多项全新交互体验,升级后的NOMI从出行助手升级为了的行车“全能管家”。
这次推送带来了更具有“人情味”的智能座舱体验,提炼五个问答一块了解一下NOMI GPT上车之后有哪些具体的场景变化。
GPT上车和传统PC、手机移动端的GPT最大的区别是车载GPT存在着多模态数据的需求,这就要求NOMI GPT能轻松实现视觉(图像)、听觉(声音)、触觉(车身传感器信息)等维度的感知能力,才能让NOMI实现包括语音、视觉和文本等多种形式的交互能力。
除了感知能力之外,NOMI GPT也拥有极强的理解和表达能力。通过认知中枢,NOMI会根据你所说的内容,结合对话中的上下文语境、感知数据和车辆的状态信息,智能地判断该调用座舱的哪些功能、提供哪些信息。
首先是蔚来推出的行业独有的情感引擎,这是NOMI实现拟人交互的关键,通过与用户长期沟通与陪伴、记忆、学习,实现有个性的成长,让NOMI不只是一个冰冷的“助手”,更是懂你的情感伙伴。
NOMI 的记忆能力包括短期记忆和长期记忆,短期记忆可以让NOMI记住你们最近在聊的话题、你之前提到人和物,长期记忆让 NOMI 能够记住你和家人朋友,记住你们的喜好,记住和你们在一起点点滴滴。
同时,情感引擎帮助NOMI更快的学习成长,通过实时反馈、事后反思、人为训练等方式,不断变得更聪明,不断掌握新技能和新知识。
情感引擎也在让NOMI有更独特的人设,包括性格、三观、梦想等,让NOMI的每一句对话、每一个表情,都符合NOMI的基本人设,但也会随着陪伴时间的增长,而潜移默化地和你更加契合。
在端侧多模态感知能力下,车机联网不再是使用NOMI的必须条件,NOMI也将具备“看得见,认得出”“听得到,听得懂”“知冷热,有触感”等能力。
除了能轻松实现端侧独立运行之外,融合了图像(视觉)、音频(听觉)、车身传感器(触觉)等多模感知的NOMI可以像人类一样,获得了更全面的感知座舱内外的人与事物的能力,并将多维度感知获得的数十亿参数,用自然语言进行描述。
基于多模态感知的能力,NOMI现在可以像朋友一样,看见你的物品、着装、状态,甚至舱外的车辆、楼宇、动物植物,并提供更懂你的服务、更有趣的沟通。
目前蔚来给出的解决方案是同一部车能做到账号隔离,敏感信息不出车,车载通信端到端加密,保障用户隐私安全的同时也让车载人工智能的感知能力得到了极大的扩展。
此次将会在搭载Banyan·榕 蔚来智能系统的车型进行推送。升级NOMI GPT功能后,除了有全新的交互界面之外,用户都能够体验包括大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的六大全新交互体验。
大模型百科支持包括社科人文、历史文学、艺术自然、影视音乐等不相同的领域的各种知识问答,并由此衍生出,旅行攻略、信息检索、内容创作等拓展性能力。
无限趣聊功能让NOMI的共情与对话能力有了显著提升。情感聊天、音乐影视、语言游戏等连续对话及多交互场景的,能够给大家提供更懂你的专属陪伴。升级NOMI GPT之后,能够尝试下问问NOMI“我想升职加薪该怎么做”;“出个灯谜让孩子猜一下”,你一定会有惊喜。
在车机拟人化方面,蔚来能够说是拥有着先天优势,中控台的NOMI车机本身就具有拟人化显示的功能,融入了AI智能之后,NOMI的趣玩表情功能能根据语音指令解锁出更多的表情,让NOMI的拟人化更上一层楼。
氛围魔法功能能设置出符合用户心情状态或心理预期的氛围效果,通过调用座舱内的氛围灯,基于大模型强大的推理能力给用户调取最契合的氛围搭配,目前NOMI已能实现超过1677万种的氛围灯搭配方案。
用车问答功能相当于给NOMI内置了一个用车手册,这一功能支持几乎所有车辆信息、用车知识的查询,比如“仪表盘上的绿色扇子是啥意思?”“儿童座椅怎么安装?”这些语音指令都能够迅速调取对应信息,便于用户更深入的了解和使用车辆。
AI场景生可以记录用户用语义创建场景需求。并可以依据对应的驾驶人、时间、环境激活这些定制化的场景。 比如说 “给我设置一个工作模式:工作日早上我上车就自动导航去公司,打开NIO Radio,下午如果我上车的时间在晚上7点之后,就开座椅按摩、氛围灯要放松一点的、然后把自定义歌单打开,5分钟以后再开回家的导航。”据了解这一功能后续将会跟随Banyan 245系统更新的NOMI应用同步上线。
墨西哥连体双胞胎网上答疑:其中一个爱情生活很和谐,另一个对谈恋爱不感兴趣
“世上最年长连体双胞胎”去世,终年62岁 一人健康、一人残疾,曾被断言活不过30岁
欧洲多国拒绝援乌爱国者 泽连斯基喊线岁男子从黑龙江到开封找王婆相亲:加了近百个女生
欧洲多国拒绝援乌爱国者 泽连斯基喊线岁男子从黑龙江到开封找王婆相亲:加了近百个女生
马刺23分逆转掘金!0.9秒准绝杀 文班3分钟17分轰34+12完胜约基奇