开启智能座舱AI时代,蔚来NOMI GPT端云多模态大模型正式上线

4月12日,蔚来宣布NOMI GPT正式开启推送。此次推送的更新是基于全新技术架构,为NOMI量身打造NOMI GPT端云多模态大模型。NOMI GPT包含自研多模态感知、自研认知中枢、情感引擎、多专家Agent,实现蔚来产品、服务、社区的全域贯通,提供更高效、愉悦的AI服务。升级NOMI GPT功能后,用户可以体验到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的多项全新交互体验,享受智能AI赋能下的全新出行。此次NOMI GPT上线将同步陆续推送给搭载Banyan·榕智能系统的车型。自发布

4月12日,蔚来宣布NOMI GPT正式开启推送。此次推送的更新是基于全新技术架构,为NOMI量身打造NOMI GPT端云多模态大模型。NOMI GPT包含自研多模态感知、自研认知中枢、情感引擎、多专家Agent,实现蔚来产品、服务、社区的全域贯通,提供更高效、愉悦的AI服务。

升级NOMI GPT功能后,用户可以体验到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的多项全新交互体验,享受智能AI赋能下的全新出行。此次NOMI GPT上线将同步陆续推送给搭载Banyan·榕智能系统的车型。自发布以来,NOMI 已经历超过130次版本迭代、超2000项功能的新增及更新。

NOMI GPT认知中枢、行业独有的情感引擎和行业领先的端侧多模态感知是NOMI焕新升级后的的三大核心技术架构,配合数十亿级的参数模型、毫秒级的响应速度,赋予了NOMI在感知、认知、决策等方面强大的复杂逻辑推理能力,具备了能与用户进行开放式问答的交互能力。

开启智能座舱AI时代,蔚来NOMI GPT端云多模态大模型正式上线

NOMI GPT的认知中枢——领会意图有默契,执行够聪明,灵活不打扰

NOMI GPT认知中枢拥有极为高效的信息认知能力,能在海量信息源中精准判断用户意图与需求,无缝调度大模型架构内组件,实现“领会用户意图有默契,执行够聪明,灵活不打扰”的优质用车体验。

蔚来自研的端云一体认知中枢,集成了行业最全知识库,包括中控分发,多模拒识,跨域继承&跳转, 多Agent决策几个部分,让NOMI有了对复杂任务的处理能力,能够对感知到的信息进行推理分析,从容调度执行各种任务,回答各种问题。通过认知中枢,NOMI会根据你所说的内容,结合对话上下文、感知以及状态信息,智能地判断调用任务型交互、问答闲聊、用车助手等,同时也能支持语义创建完整的快捷场景。

行业独有情感引擎——NOMI与你情投意合

行业独有的情感引擎是NOMI实现拟人交互的关键,通过与用户长期的沟通与陪伴、记忆、学习,实现有个性的成长,让NOMI不只是一个冰冷的“助手”,更是懂你的情感伙伴。

NOMI 的记忆能力包括短期记忆和长期记忆,短期记忆可以用户近期感兴趣的话题、提到人和物,长期记忆能够记住用户及家人朋友,记住每一个人的喜好。

在情感引擎的帮助下,NOMI可以更快的学习成长,通过实时反馈、事后反思、人为训练等方式,不断变得更加聪明,不断掌握新技能和新知识。

情感引擎也让每一个NOMI都能发展出和用户性格相契合的“人设”,包括性格、三观、梦想等,和NOMI的每一句对话、每一个表情,更自然、更有温度,随着陪伴时间的增长,NOMI也会潜移默化地和用户的性格更加契合。

行业领先的端侧多模态感知——无网络,NOMI也可以看得见,认得出

在行业领先的端侧多模态感知能力下,车机联网不再是用户使用NOMI的必须条件,NOMI也将具备“看得见,认得出”“听得到,听得懂”“知冷热,有触感”等能力,做到账号隔离,敏感信息不出车,车载通信端到端加密,保障用户隐私安全的同时也让车载人工智能的感知能力得到了极大的扩展。

除了可以实现端侧独立运行之外,融合了图像(视觉)、音频(听觉)、车身传感器(触觉)等多模感知的NOMI可以像人类一样,获得了更全面的感知座舱内外的人与事物的能力,并将多维度感知获得的数十亿参数,用自然语言进行描述。

基于多模态感知的能力,NOMI现在可以像朋友一样,看见你的物品、着装、状态,甚至舱外的车辆、楼宇、动物植物,并提供更懂你的服务、更有趣的沟通。

端侧多模态感知内部测试中,预计今年内面向蔚来车型推送。

相关资讯

AI 结合汽车,蔚来宣布 NOMI GPT 领航版开启招募

蔚来汽车今日宣布,2024 NOMI 焕新,GPT 领航版正式开启招募。经历 132 次版本迭代更新、为用户带来了超 2000 项功能的 NOMI,即将进入体验升级新篇章。官方称登陆蔚来 App,关注用户领航团发布的最新招募信息。然而,IT之家暂未找到招募入口,评论区网友也表达了同样的疑惑,蔚来对此表示“别着急,刷一刷就上线了”。IT之家注意到,2024 款蔚来全系车型均将采用全新的中央计算平台 ADAM,搭载高通骁龙 8295 座舱芯片,座舱算力得到明显提升。其中,8295 芯片相较于 8155 芯片,CPU 算

百度全新无人挖掘机作业系统登上国际权威期刊《Science Robotics》

近日,由百度研究院机器人与自动驾驶实验室(RAL)团队牵头开发的全新无人挖掘机作业系统(AES)这一最新技术成果,登上了国际顶级期刊《Science》子刊《Science Robotics》,并获得了评审专家与期刊编委的高度评价。该研究融合了感知、运动规划和控制系统,可驱动挖掘机自主完成挖装任务,进行24小时连续无人化作业,并成为全球首个实际落地的、可长时间作业的无人挖掘机系统,在工程机械自动化、无人化作业领域具有重要价值和影响。随着新型基础设施建设的大力推进,工程机械行业乘风而上,并不断向数字化、智能化方向演进。

什么样的方案,夺得了CVPR自动驾驶挑战赛冠军?

自动驾驶中的三维占用预测难题,一场比赛给出了解决方案。