现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

7 月 4 日,在 2024 天下人工智能大会上,具身智能公司穹彻智能 Noematrix (展位号:H1-A715) 宣布推出穹彻具身大脑 Noematrix Brain,加速具身智能大模型落地。结合实体机器人,穹彻在完全开放的环境中向现场观众近距离展现了 “随手一扔就能叠的衣物折叠”(无限自由度物体操纵,复杂物体理解堪比人类)和 “削完就能吃的黄瓜削皮”(不规则曲面操纵,精密度甚至超越人类水平)等突破性手艺,以及家庭地面整理等落地运用。通过这些实时演示和真实互动,穹彻具身大脑的通用性和鲁棒性得以全方位展现。穹彻

7 月 4 日,在 2024 天下人工智能大会上,具身智能公司穹彻智能 Noematrix (展位号:H1-A715) 宣布推出穹彻具身大脑 Noematrix Brain,加速具身智能大模型落地。

结合实体机器人,穹彻在完全开放的环境中向现场观众近距离展现了 “随手一扔就能叠的衣物折叠”(无限自由度物体操纵,复杂物体理解堪比人类)和 “削完就能吃的黄瓜削皮”(不规则曲面操纵,精密度甚至超越人类水平)等突破性手艺,以及家庭地面整理等落地运用。通过这些实时演示和真实互动,穹彻具身大脑的通用性和鲁棒性得以全方位展现。

穹彻具身大脑提供 “以力为中心” 的具身智能大模型、原子手艺库 AnySkill、基础软件框架及相关开发者工具链,助力机器人轻松掌握更多手艺、完成更多运用,充分发挥具身智能的价值。

现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!                                       穹彻具身大脑产品展现

穹彻智能成立于 2023 年,由通用智能机器人公司 Flexiv 非夕科技战略孵化,上海交通大学传授,长江学者特聘传授、2023 年 “科学探索奖” 获得者(目前具身智能领域唯一)卢策吾传授担任联合创始人。

鉴于多年深耕人工智能领域的经验和深厚的手艺积累(发表顶会顶刊 100 多篇,多次获得国际机器人顶会最佳论文奖),卢策吾及其团队在构建具身智能大模型时,将手艺重点放在了对操纵物理常识和力反馈嵌入智能体行为决议计划的联合训练上,从而打造了 Noematrix Brain 穹彻具身大脑。

穹彻具身大脑具备全链路的具身智能手艺框架。其中,穹彻自研的两个具身智能大模型:实体天下大模型和机器人行为大模型,可以看作此框架中的主要助推器,承担了推进操纵物理常识和智能体行为决议计划的联合训练的重担。

现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

                                                       穹彻具身智能大脑手艺框架

实体天下大模型能够通过训练来学习操纵物理常识表征,并做到低成本可规模化地让穹彻具身大脑理解 “天下是什么”,本次大会上所展现的衣物折叠正是这一强大本领的具象呈现:在 AI 的天下里,对操纵对象的本质理解会随着其自由度增加而提升,但柔性物体的自由度是无穷维的,因此可以鉴于衣物的任意初始状态完成折叠操纵这一展现,成功体现了穹彻具身大脑对复杂物体操纵的理解的顶级本领。调研表明,这也是全球第一次在公开展会上开放展现初始状态混乱的衣物折叠。

现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

                                     鉴于通用柔性物体折叠手艺 AnyFold,机器人可以完成柔性衣物的展开、识别与折叠等操纵

而机器人行为大模型则可以做到以力和操纵对象为中心坍缩训练空间,让穹彻具身大脑以极高的训练效率学会 “如何决议计划”,且具有极佳的鲁棒性和安全性。

以两个大模型为基础,穹彻具身大脑得以具备规划、记忆、执行这三种核心本领。在上个月的机器之心访谈中,卢传授亲自尝试了 “天下上首个刮胡子机器人” 的服务,其演示全程就生动呈现了这三种本领的交叉和融合。

现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

                                     当人头部移动时,嵌入了高精度力反馈模块的具身智能大模型能够瞬时感知并决议计划力的变化

同时,为卢传授刮胡子的机器人还被赋予了通用物体表面刮削手艺(AnyShave)。鉴于穹彻具身大脑,穹彻提供不断扩张的机器人原子手艺库 AnySkill,从而使智能体具备通用操纵本领。通过提升单一手艺的泛化通用性和可靠性,增强多手艺组合的复杂任务处理和复杂环境适应本领,AnySkill 能够以最精简的原子本领集,支持各类场景的快速开发。现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

                                    AnyShave 同样可以用于黄瓜削皮等操纵中,并组合其他手艺一起使用,精密程度达到人类水平

鉴于每个原子手艺强大的泛化迁移本领,在天下人工智能大会现场,穹彻展台也展出了 AnyShave 的另一个有趣运用 —— 给黄瓜精密削皮。无需提前建模,AnyShave 可以根据黄瓜表面状况自主判断最优刮削轨迹、用刃方向、适宜速度和力,并自适应其曲面,操纵如人一般精密,甚至某些时候超过人。

如果大模型仅依靠视觉进行判定和决议计划,那对黄瓜这类物体的起伏表面的刮削将很难顺利完成,即使使用遥操纵等方式,也无法做到与人相似的程度。

现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

此外,穹彻具身大脑还提供生态运用开发所需的全生命周期工具链,覆盖从数字孪生、数据采集、模型训练到业务开发、机器人集群管理等多种需求。

据穹彻表示,Noematrix Brain 穹彻具身大脑聚焦在非结构化、开放场景、开放任务下的机器人智能边界的突破,与各种类型的机器人本体、甚至工业设备都能有机结合,包括但不限于工业机器人、人形机器人、服务型机器人、智能家居设备等等。

现场削黄瓜、叠衣服,曾爆火的刮胡子机器人再进化,穹彻的具身智能大脑来了!

当执行体被具身智能加持,它们就有了能指引感知、记忆、执行、交互的 “大脑”,用武之地十分广阔,能更易协助或替代人类完成枯燥、繁重的工作,成为人们的好帮手。

在目前阶段,穹彻将在零售运营、物流拣选、食材处理、家庭服务和科研教育领域充分探索和打磨 Noematrix Brain 的核心运用。卢策吾传授表示:“具身智能是手艺发展迈向人工通用智能(AGI)路上的重要一步。我们希望在坚持不断创新的同时,做好手艺运用落地,与行业领先的合作伙伴携手,为不同领域提供创新的具身智能解决方案和服务,不断积累实现形态涌现,最终做到更便捷、更通用的智能服务于人。”

给TA打赏
共{{data.count}}人
人已打赏
应用

快手文生图大模型“可图”宣布开源,现已上线微信小程序和网页版

2024-7-6 10:49:03

应用

现场Live震撼!OmAgent框架强势开源!行业使用已周到开花

2024-7-6 11:02:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索