商汤绝影全舱人脸感知技术,助力乐道L60上市,为每位用户打造专属关怀

在乐道L60的发布会上,「小乐识人」的场景演示视频获得了现场与线上观众的一致好评,主动为二大爷播放他喜欢的京剧、给爷爷按腰去除疲劳,都是专属于每位用户的贴心关怀。这背后离不开商汤绝影提供的OMS功能,尤其是全舱人脸感知技术,它助力了乐道L60识别并记住车内每位乘客,最多可记忆20个账号,三世同堂的家庭、七大姑八大姨都能记住,小乐通通叫上姓名。基于这个能力,乐道汽车可以同步每个乘客的个性化数据,如:座椅位置、音乐账号等,实现个性化体验,让用户感觉更加亲切、自然,有温度。结合商汤绝影多模感知、乐道账号的综合能力,乐道汽

在乐道L60的发布会上,「小乐识人」的场景演示视频获得了现场与线上观众的一致好评,主动为二大爷播放他喜欢的京剧、给爷爷按腰去除疲劳,都是专属于每位用户的贴心关怀。

这背后离不开商汤绝影提供的OMS功能,尤其是全舱人脸感知技术,它助力了乐道L60识别并记住车内每位乘客,最多可记忆20个账号,三世同堂的家庭、七大姑八大姨都能记住,小乐通通叫上姓名。基于这个能力,乐道汽车可以同步每个乘客的个性化数据,如:座椅位置、音乐账号等,实现个性化体验,让用户感觉更加亲切、自然,有温度。

结合商汤绝影多模感知、乐道账号的综合能力,乐道汽车的人脸识别准确率高达99.9%,支持多位置的乘客面容录入和全舱乘客识别,为全舱智能能多场景能力提供了更多可能性。

商汤绝影全舱人脸感知技术,助力乐道L60上市,为每位用户打造专属关怀

DMS/OMS视觉融合,多场景识别能力领先业界

当前,行业普遍采用的人脸模型存在关键点遮挡,在特殊场景下关键部位预测不准的问题。此次,商汤绝影通过单颗OMS摄像头实现全舱五座人脸识别,克服前排乘员大角度脸部成像、后排乘员脸部信息(像素值、光照)不良等多种实际应用中的不利因素。

首先,在人脸模型的构建上商汤绝影重点优化脸部区域,重新构建人脸模型。其次,在Face lD训练集参数量上,相比一般行业数据,人脸ID 提升160%,人脸数据提升200%。而部署模型参数量进一步优化,速度提升了10%。从而有效提升了脸部大角度、模糊、畸变、遮挡等多种实际泛化场景下的产品性能,真正做到了多场景精准识别。

多模感知,助力乐道L60更懂你

通过商汤绝影和乐道的多模感知能力和全舱账号体系的画像信息,乐道汽车的交互脱离“主驾”、“副驾”等生硬词汇,可以更加亲切的称呼用户,送上更贴己的问候。感受便利的同时,用户也不必为隐私担忧。商汤绝影高度重视个人数据安全与隐私保护,已构建全面可靠的数据隐私保护管理体系,并获得权威机构认证。做到了数据不上云、不出车,端侧保存,最大化程度保护驾乘隐私,让用户更安心。

商汤绝影全舱人脸感知技术,助力乐道L60上市,为每位用户打造专属关怀

商汤绝影座舱感知量产行业第一,守护出行安全

作为国内智能座舱软件领域的领头羊,商汤绝影座舱AI软件的市场份额连续5年位列行业第一,已经打造超过15个行业首发的智能座舱产品与功能,展现出强大的持续创新能力和量产上车实力。

2024年1月,蔚来正式发布Banyan·榕2.4.0 智能系统,其中商汤绝影与蔚来紧密合作,持续打磨优化全舱人脸识别技术能力,助力蔚来发布行业首创的NOMI全舱记忆功能。

今年6月,商汤绝影助力极氪X打造的DMS方案获得ENCAP 1.7分的高分(满分2分),成为已通过ENCAP测试车型中DMS得分最高的车型。采用了融合直接监测和间接监测的产品方案,两种监测方案融合判断的新方案保证了DMS系统的鲁棒性,让极氪X在各种环境条件下都能稳定、及时地作出反应。

近期,商汤绝影DMS助力昊铂HT斩获C-IASI「3G+」大满贯。

在OMS领域,从2023年开始,欧洲及中国汽研组织纷纷开始要求,新上市车型需要配备儿童遗留检测系统。从2025年开始,欧洲EuroNCAP组织进一步明确,必须采用更直接的生命体特征检测方式,以达到准确判别有儿童存在的目的。

基于精准的儿童识别功能,商汤绝影为带娃场景扩充了整套场景设计,上车时绝影OMS系统可以提心地提醒用户儿童是否位于正确的位置或者自动落下童锁,有些车辆甚至可以贴心地于孩子打个招呼;行车过程中,OMS系统可以时刻帮独自开车的父母关注后排儿童的状态,在儿童入睡、哭闹、甚至调皮地伸手出窗时给予提示,让带娃出行更安全。

蔚来率先使用了绝影的儿童识别功能,满足其CPD功能要求;广汽使用绝影儿童识别功能,实现上车阶段的儿童关怀,如自动实现对应位置的童锁落锁。

目前,商汤绝影智能座舱产品解决方案已经上车30家国内外主机厂,覆盖80多个车型,守护用户的出行安全。

相关资讯

商汤绝影行业首发原生多模态大模型车端部署:80 亿参数、每秒 40 Tokens

商汤科技联合创始人、首席科学家王晓刚 17 日宣布,商汤绝影在行业内率先实现了原生多模态大模型的车端部署。车载端侧 8B 模型首包延迟在 300 毫秒以内,推理速度 40 Tokens / 秒,覆盖主流算力平台。商汤绝影为多模态大模型打造计算引擎“HyperPPL”,目前扩展并支持主流车载计算硬件,兼容多种主流操作系统,适配多个车载芯片的部署平台。商汤绝影称 HyperPPL 针对车载多人场景进行优化,使得车内多人并发情况下,车端多模态大模型的模型推理效率相比单人没有明显降低。据AI在线此前报道,商汤绝影此前表示,

商汤发布日日新 5.0 大模型:推理上下文窗口 200K,号称对标 GPT-4 Turbo

感谢4 月 23 日,商汤科技发布了日日新 5.0 大模型。据介绍,该模型采用 MOE 混合专家架构,在知识、数学、推理和代码能力方面大幅提升。该模型基于超过 10TB tokens 训练,具备 200K 推理上下文窗口(IT之家注:相当于 36.5 万个汉字),推理时上下文窗口达到 200K 左右,更号称“全面对标 GPT-4 Turbo”。其提供自然语言处理、图片生成、自动化数据标注、自定义模型训练等多种大模型及能力。文科能力方面,其在创意写作、推理总结等方面能力均有提升,可为教育、内容产业等垂直应用场景提供辅

商汤推出粤语版商量语言 / 多模态大模型,可深入理解粤语俚语、粤文化

感谢据商汤科技官方公众号,在 5 月 29 日香港举办的“商量粤语版发布会暨商汤科技十周年志庆启动礼”上,商汤宣布将免费向粤语区用户推出粤语大模型 Web 版及 App 版,“商量语言大模型粤语版”及“商量多模态大模型粤语版”即日起向企业用户开放 API。商汤科技董事长兼 CEO 徐立表示,“商汤科技十年前于香港成立,在这个地方推出商量粤语版,对我们来说有着重大的意义。凭借日日新大模型 5.0 系列的创新产品及其巨大潜力,我们致力推动香港人工智能生态系统的发展。”据介绍,商汤“日日新 5.0”(IT之家注:已于 4