1段视频=亿万虚拟场景,当真实世界秒变机器人训练场

3月19日,群核科技在GTC2025全球大会上宣布开源空间理解模型SpatialLM,这是一个基于大语言模型的3D场景语义生成框架。 它突破了传统大语言模型对物理世界几何与空间关系的理解局限,赋予机器类似人类的空间认知和解析能力。 这相当于为具身智能领域提供了一个基础的空间理解训练框架,企业可以针对特定场景对SpatialLM模型微调,降低具身智能训练门槛。

3月19日,群核科技在GTC2025全球大会上宣布开源空间理解模型SpatialLM,这是一个基于大语言模型的3D场景语义生成框架。它突破了传统大语言模型对物理世界几何与空间关系的理解局限,赋予机器类似人类的空间认知和解析能力。这相当于为具身智能领域提供了一个基础的空间理解训练框架,企业可以针对特定场景对SpatialLM模型微调,降低具身智能训练门槛。

1段视频=亿万虚拟场景,当真实世界秒变机器人训练场

群核科技SpatialLM模型开源页面

据悉,该模型仅通过一段视频即可生成物理正确的3D场景布局。基于从视频中提取的点云数据,SpatialLM模型能够准确认知和理解其中的结构化场景信息。目前,SpatialLM已在HuggingFace、GitHub、魔搭社区等平台面向全球开发者开源。据群核科技相关技术负责人称,此次开源仅是开始,接下来SpatialLM模型将继续迭代如自然语言和场景交互等功能。

1段视频=亿万虚拟场景,当真实世界秒变机器人训练场

SpatialLM运行原理

“我们希望打造一个从空间认知理解到空间行动交互闭环的具身智能训练平台。本次开源的SpatialLM空间理解模型旨在帮助具身智能机器人完成在空间认知理解上的基础训练。而去年群核科技发布的空间智能解决方案SpatialVerse,则希望进一步通过合成数据方案为机器人搭建最接近物理真实的‘数字道场’,实现机器人在仿真环境中的行动交互训练。”群核科技董事长黄晓煌在接受采访时表示。

据了解,群核空间智能平台SpatialVerse是本次亮相GTC的另一个重头戏,它与SpatialLM模型之间“协同合作”,打通了"现实 - 虚拟 - 现实" 的闭环路径,共同为具身智能架起一座数字仿真与物理现实之间的桥梁。例如,SpatialLM模型通过从视频到结构化场景的转化,将现实世界的数据转化为虚拟环境中的丰富场景,而基于SpatialVerse的合成数据引擎,一个结构化场景又可泛化生成亿万级新场景。这也意味着,现实世界将成为SpatialVerse“数字道场”的原料来源。

"我相信全球很快会迎来具身智能机器人的爆发性发展,在具身智能背后,是算力、算法、工程和训练数据四个板块的协同进化,这需要全行业合力推动。群核科技希望通过空间模型和数据开源一起推动技术基座建设,为这个技术奇点的来临贡献一份力量。”黄晓煌提到。据悉,在空间和具身智能训练上,目前群核科技已与硅谷头部科技企业等在内的一批国内外具身智能企业达成合作。

相关资讯

杭州六小龙开源新模型SpatialLM,助力机器人瞬间理解 3D 世界!

最近,杭州的科技公司群核科技再次引起了行业关注,因其开源的空间理解模型 SpatialLM 被谷歌在一篇论文中点名感谢。 这个模型的创新之处在于,它能让机器人通过一段普通的视频理解物理世界的几何关系,标志着机器人训练领域的一次重大突破。 SpatialLM 的核心功能是将手机拍摄的视频转化为三维空间布局信息。

有鹿机器人披露获超1亿元融资,携超千万元订单引领具身智能赛道进入商业化阶段

这是严格意义上具身智能这个热门赛道第一笔高额订单,有鹿机器人也正式实现了具身智能从实验室走向商业化的阶段。公司同步披露了创新工场、元璟资本、百度风投等超1亿元融资的信息。大模型@具身智能产品 打通商业化任督二脉2023年,有鹿机器人联合阿里云通义千问共同发布了具身智能大模型LPLM-10B。LPLM模型将语言大模型和物理世界进行了创造性的融合,正好形成了完整的左右大脑功能,解决了传统具身模型延迟高、准确率低、泛化能力差等缺陷。LPLM大模型最大的优势是通用性,可以实现在跨模态、跨场景、跨行业的数据中提取出许多共性信

大模型将在医疗、教育领域发力,北京发布“人工智能 +”行动计划

感谢北京市发展和改革委员会、北京市经济和信息化局北京市科学技术委员会、中关村科技园区管理委员会今日发布了《北京市推动“人工智能 ”行动计划(2024-2025 年)》。《行动计划》提出了发展目标:2025 年底,通过实施 5 个对标全球领先水平的标杆型应用工程、组织 10 个引领全国的示范性应用项目、推广一批具有广泛应用前景的商业化应用成果,力争形成 3-5 个先进可用、自主可控的基础大模型产品、100 个优秀的行业大模型产品和 1000 个行业成功案例。率先建设 AI 原生城市,推动北京成为具有全球影响力的人工