Meta 宣布新一代 AI 训练与推理芯片,功能为初代芯片三倍

Meta Platforms 当地时间 10 日宣布了其训练与推理加速器项目(MTIA)的最新版本,MTIA 是 Meta 专门为 AI 工作负载设计的定制芯片系列。据介绍,此次宣布的新一代 MTIA 与第一代 MTIA 相比,明显改进了功能,并有助于强化内容排名和推荐广告模型。其架构从根本上侧重于供应算计、内存带宽和内存容量的适合均衡。该芯片还可帮助提高训练效率,使推理(即实际推理任务)变得更容易。Meta 在其官方博客文章中表示,“实现我们对定制芯片的雄心壮志,意味着我们不仅要投资于算计芯片,还要投资于内存带宽

Meta Platforms 当地时间 10 日宣布了其训练与推理加速器项目(MTIA)的最新版本,MTIA 是 Meta 专门为 AI 工作负载设计的定制芯片系列。

Meta 宣布新一代 AI 训练与推理芯片,功能为初代芯片三倍

Meta 宣布新一代 AI 训练与推理芯片,功能为初代芯片三倍

据介绍,此次宣布的新一代 MTIA 与第一代 MTIA 相比,明显改进了功能,并有助于强化内容排名和推荐广告模型。其架构从根本上侧重于供应算计、内存带宽和内存容量的适合均衡。

Meta 宣布新一代 AI 训练与推理芯片,功能为初代芯片三倍

该芯片还可帮助提高训练效率,使推理(即实际推理任务)变得更容易。Meta 在其官方博客文章中表示,“实现我们对定制芯片的雄心壮志,意味着我们不仅要投资于算计芯片,还要投资于内存带宽、网络和容量以及其他下一代硬件系统。”

目前,MTIA 主要训练排名和推荐算法,但 Meta 表示,其目标是最终扩展芯片功能,开始训练生成式人工智能,如其 Llama 语言模型。

此次宣布的新一代 MTIA 芯片据悉将“从根本上”侧重于供应算计、内存带宽和内存容量之间的适合均衡。该芯片拥有 256MB 的片上内存和 1.35GHz 的主频,采用台积电 5nm 工艺制造,相较于第一代产品的 128MB 和 800MHz 实现了明显提升。

Meta 宣布新一代 AI 训练与推理芯片,功能为初代芯片三倍

Meta 公司的早期测试结果显示,在该公司评估的四种型号中,新芯片的功能达到第一代的三倍。IT之家附该芯片详细参数与前代产品的对比如下图:

Meta 宣布新一代 AI 训练与推理芯片,功能为初代芯片三倍

当前该芯片已在数据中心部署,并为 AI 应用供应服务。

给TA打赏
共{{data.count}}人
人已打赏
AI

UL Procyon AI 图象生成基准尝试现已适配兼容苹果 macOS 系统

2024-4-10 22:00:48

AI

1760 亿参数、大小 281GB,Mixtral 8x22B 开源模型登场:可 Torrent 下载

2024-4-11 6:06:10

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索