上海交大卢策吾:具身智能与他的首个刮胡子机械人 | 智者访谈

查阅历史资料后表明,上海交通大学的卢策吾传授是世界上第一个被机械人用刀片刮胡子的人。视频展示了上海交通大学卢策吾传授亲自体验其团队研发成果的过程——在一个具身智能大模型操控下,机械臂完成了刮胡子的动作。机械人给人刮胡子,看似简单,实则蕴含巨大挑战,除了行为泛化性,更重要的是需要极致鲁棒性。可以看到,当卢传授的头部移动时,这个嵌入了高精度力反馈模块的具身智能大模型能够瞬时决策压力和切向力的变化,既把胡须刮干净,又不会伤到他。如果大模型仅通过视觉判定轨迹输出,将难以完成任务。这也无法通过遥操作实现。在大模型风靡的 20

查阅历史资料后表明,上海交通大学的卢策吾传授是世界上第一个被机械人用刀片刮胡子的人。

上海交大卢策吾:具身智能与他的首个刮胡子机械人 | 智者访谈

视频展示了上海交通大学卢策吾传授亲自体验其团队研发成果的过程——在一个具身智能大模型操控下,机械臂完成了刮胡子的动作。

机械人给人刮胡子,看似简单,实则蕴含巨大挑战,除了行为泛化性,更重要的是需要极致鲁棒性。

可以看到,当卢传授的头部移动时,这个嵌入了高精度力反馈模块的具身智能大模型能够瞬时决策压力和切向力的变化,既把胡须刮干净,又不会伤到他。如果大模型仅通过视觉判定轨迹输出,将难以完成任务。这也无法通过遥操作实现。

在大模型风靡的 2024 年,如果说 AI 范围还有哪些热点,「具身智能」必定位列其中。

与被动接收信息不同,具身智能(Embodied AI)强调智能体主动与物理环境进行交互。这种交互并非毫无代价,每一次行动都可能改变环境状态,带来新的挑战,需要智能体不断调整自身策略。

试探具身智能,为理解智能的素质提供了一个独特视角,基于身体发展智能,也是一种与既有 AI 研究完全不同的范式。

人工智能的卓越发展,源于对手艺和产业素质的思索。

机械之心推出全新视频栏目「智者访谈」,邀请范围专家,洞悉 AI 核心手艺与行业趋势。为从业者量身打造,旨在深化行业认知,激发创新思索。在本期节目中,上海交通大学的卢策吾传授深度剖析具身智能,带来从原理到落地的全方位思索。

上海交大卢策吾:具身智能与他的首个刮胡子机械人 | 智者访谈

上海交大卢策吾:关于具身智能、Scaling Law 以及大模型上海交大卢策吾:具身智能与他的首个刮胡子机械人 | 智者访谈

时间戳

00:00    高朋介绍

01:00    具身智能的内涵与特性

03:09    具身智能「身体」与「智能」的标准?

06:42    99.X%:除了通用性,还需要鲁棒性

13:09    不同手艺途径及分析

15:20    Sora 能理解物理世界吗?

20:18    具身智能大模型:两级火箭架构

25:11    Scaling Law 在具身智能范围会如何体现?

32:03    「数据即科研」

38:20    具身智能评估:成本与有效性难兼顾

46:53    具身智能创业:只有正确的手艺途径,才能达到 99.X%

55:16    具身智能人才:顶级人才将一直稀缺

高朋简介

卢策吾,上海交通大学传授,博士生导师,科学试探奖获得者(获奖原因:具身智能贡献),2018 年被《麻省理工科技评论》评为 35 位 35 岁以下中国科技精英(MIT TR35),2019 年获求是杰出青年学者,2020 年获上海市科技进步特等奖,吴文俊自然科学一等奖,2022 年获教育部青年科学奖,2021/2022 获中国高被引学者,2022 年获国际机械人顶会 IROS 最佳论文之一(6/3579),RSS 最佳系统论文提名,以通讯作者或第一作者在《自然》,《自然-机械智能》,TPAMI,T-RO,IJRR 等高水平期刊和会议发表论文 100 多篇;担任 Science 正刊,Nature 子刊,Cell 子刊等期刊审稿人,NeurIPS,CVPR,ICCV ,ECCV,IROS ,ICRA 范围主席。研究兴趣包括具身智能,机械人学习,计算机视觉。作为联合创始人,首席科学家,创立具身智能公司穹彻智能。

精彩片段上海交大卢策吾:具身智能与他的首个刮胡子机械人 | 智者访谈

关注机械之心视频号及 B 站账号

更多精彩内容等你来看!

给TA打赏
共{{data.count}}人
人已打赏
应用

多模态大模型不够灵活,谷歌DeepMind创新架构Zipper:分开训练再「压缩」

2024-6-3 15:27:00

应用

物理传热启发的视觉表征模型vHeat来了,尝试突破注意力机制,兼具低复杂度、全部感触感染野

2024-6-3 15:58:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索