Meta SAM 2 登场:首个能在图片和视频中实时分割对象的统一开源 AI 模型

感谢Meta 公司发布 Meta Segment Anything Model 2(SAM2),SAM 2 能分割任何目标,能在一个视频中实时追踪所有镜头 —— 解锁新的视频编辑能力并在混合现实中提供新的体验。Meta 公司今天发布新闻稿,介绍了全新的 Meta Segment Anything Model 2(SAM 2)模型,先支持分割视频和图像中的对象。开源Meta 公司宣布将以 Apache 2.0 许可发布 SAM 2,因此任何人都可以使用它来构建自己的体验。Meta 还将以 CC BY 4.0 许可共享
感谢Meta 公司发布 Meta Segment Anything Model 2(SAM2),SAM 2 能分割任何目标,能在一个视频中实时追踪所有镜头 —— 解锁新的视频编辑能力并在混合现实中提供新的体验。

Meta SAM 2 登场:首个能在图片和视频中实时分割对象的统一开源 AI 模型

Meta 公司今天发布新闻稿,介绍了全新的 Meta Segment Anything Model 2(SAM 2)模型,先支持分割视频和图像中的对象。

开源

Meta 公司宣布将以 Apache 2.0 许可发布 SAM 2,因此任何人都可以使用它来构建自己的体验。

Meta 还将以 CC BY 4.0 许可共享用于构建 SAM 2 的数据集 SA-V,并发布基于网络的演示体验,所有人都可以在其中试用 Meta 的模型版本。

对象分割

对象分割(Object segmentation)是指识别图像中与感兴趣物体相对应的像素,是计算机视觉领域的一项基本任务。

Meta SAM 2 登场:首个能在图片和视频中实时分割对象的统一开源 AI 模型

Meta SAM 2 登场:首个能在图片和视频中实时分割对象的统一开源 AI 模型

Meta 公司去年发布了 SAM 1 基础模型,已经可以在图像上分割对象。而最新发布的 SAM 2 可用于图片和视频,并可以实现实时、可提示的对象分割。

SAM 2 在图像分割准确性方面超越了以往的能力,在视频分割性能方面优于现有成果,同时所需的交互时间减少了三倍。

SAM 2 还可以分割任何视频或图像中的任何对象(通常称为零镜头泛化),这意味着它可以应用于以前未见过的视觉内容,而无需进行自定义调整。

AI在线附上参考地址

segment-anything-2

Introducing SAM 2: The next generation of Meta Segment Anything Model for videos and images

Our New AI Model Can Segment Anything – Even Video

 SAM 2: The next generation of Meta Segment Anything Model for videos and images

Meta Unveils SAM 2: A Unified Model for Real-Time Object Segmentation in Images and Videos

相关资讯

分割一切「3D高斯」版来了:几毫秒完成3D分割、千倍加速

有了上海交大和华为提出的 SAGA,辐射场中的交互式 3D 分割任务实现起来会更快、效果更好。今年 4 月,Meta 发布「分割一切(SAM)」AI 模型,这项成果不仅成为很多 CV 研究者心中的年度论文,更是在 ICCV 2023 上斩获最佳论文提名 。「分割一切」实现了 2D 分割的「既能」和「又能」,可以轻松地执行交互式分割和自动分割,且能泛化到任意新任务和新领域。现在,这种思路也延展到了 3D 分割领域。辐射场中的交互式 3D 分割一直是个备受关注的课题,在场景操作、自动标注和 VR 等多个领域均有潜在应用

CVPR 2024 | 分割一切模型SAM泛化能力差?域适应策略给解决了

第一个针对「Segment Anything」大模型的域适应策略来了!相关论文已被CVPR 2024 接收。引言大语言模型(LLMs)的成功激发了计算机视觉领域探索分割基础模型的兴趣。这些基础分割模型通常通过 Prompt Engineer 来进行 zero/few 图像分割。其中,Segment Anything Model(SAM)是最先进的图像分割基础模型。                             图  SAM 在多个下游任务上表现不佳但是最近的研究表明,SAM 在多种下游任务中并非具有很强的

第二波!2023年4月精选实用设计工具合集

大家好,这是 2023 年 4 月的第 2 波设计干货合集!这期首先会推荐 Meta 出品的全新多功能抠图 AI 引擎,和多个可以在 Figma 当中使用的 AI 驱动的设计工具。此外,特别值得一提的是,这一期还有新的可下载的免费图库,以及一个帮助设计师提升「设计说服力」的设计系统,非常有意思! 当然,在此之前记得看看往期干货中有没有你感兴趣的素材:下面我们具体看看这一期的干货: 1、Meta 出品的全新 AI 识别分割工具 SAM 有可能手工抠图的时代要彻底过去了,Meta 出品的这个名为 SAM 的全新 AI