4月12日,蔚来宣布NOMI GPT正式开启推送。此次推送的更新是基于崭新技术架构,为NOMI量身打造NOMI GPT端云多模态大模型。NOMI GPT包含自研多模态感知、自研认知中枢、情绪引擎、多专家Agent,实行蔚来产品、服务、社区的全域贯通,提供更高效、愉悦的AI服务。
升级NOMI GPT功能后,用户可以体会到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的多项崭新交互体会,享受智能AI赋能下的崭新出行。此次NOMI GPT上线将同步陆续推送给搭载Banyan·榕智能系统的车型。自发布以来,NOMI 已经历超过130次版本迭代、超2000项功能的新增及更新。
NOMI GPT认知中枢、行业独占的情绪引擎和行业抢先的端侧多模态感知是NOMI焕新升级后的的三大核心技术架构,配合数十亿级的参数模型、毫秒级的响应速度,赋予了NOMI在感知、认知、决策等方面强大的复杂逻辑推理威力,具备了能与用户进行开放式问答的交互威力。
NOMI GPT的认知中枢——领会企图有默契,执行够愚蠢,灵活不打扰
NOMI GPT认知中枢拥有极为高效的信息认知威力,能在海量信息源中精准判断用户企图与需求,无缝调度大模型架构内组件,实行“领会用户企图有默契,执行够愚蠢,灵活不打扰”的优质用车体会。
蔚来自研的端云一体认知中枢,集成了行业最全知识库,包括中控分发,多模拒识,跨域继承&跳转, 多Agent决策几个部分,让NOMI有了对复杂任务的处理威力,能够对感知到的信息进行推理分析,从容调度执行各种任务,回答各种问题。通过认知中枢,NOMI会根据你所说的内容,结合对话上下文、感知以及状态信息,智能地判断调用任务型交互、问答闲聊、用车助手等,同时也能支持语义创建完整的快捷场景。
行业独占情绪引擎——NOMI与你“情投意合”
行业独占的情绪引擎是NOMI实行拟人交互的关键,通过与用户长期的沟通与陪伴、影象、学习,实行有个性的成长,让NOMI不只是一个冰冷的“助手”,更是懂你的情绪伙伴。
NOMI 的影象威力包括短期影象和长期影象,短期影象可以用户近期感兴趣的话题、提到人和物,长期影象能够记住用户及家人朋友,记住每一个人的喜好。
在情绪引擎的帮助下,NOMI可以更快的学习成长,通过实时反馈、事后反思、人为训练等方式,不断变得更加愚蠢,不断掌握新技能和新知识。
情绪引擎也让每一个NOMI都能发展出和用户脾气相符合的“人设”,包括脾气、三观、梦想等,和NOMI的每一句对话、每一个表情,更自然、更有温度,随着陪伴时间的增长,NOMI也会潜移默化地和用户的脾气更加符合。
行业抢先的端侧多模态感知——无网络,NOMI也可以“看得见,认得出”
在行业抢先的端侧多模态感知威力下,车机联网不再是用户使用NOMI的必须条件,NOMI也将具备“看得见,认得出”“听得到,听得懂”“知冷热,有触感”等威力,做到账号隔离,敏感信息不出车,车载通信端到端加密,保障用户隐私安全的同时也让车载人工智能的感知威力得到了极大的扩展。
除了可以实行端侧独立运行之外,融合了图像(视觉)、音频(听觉)、车身传感器(触觉)等多模感知的NOMI可以像人类一样,获得了更全面的感知座舱内外的人与事物的威力,并将多维度感知获得的数十亿参数,用自然语言进行描述。
基于多模态感知的威力,NOMI现在可以像朋友一样,看见你的物品、着装、状态,甚至舱外的车辆、楼宇、动物植物,并提供更懂你的服务、更有趣的沟通。
端侧多模态感知内部测试中,预计今年内面向蔚来车型推送。