AI在线 AI在线

英伟达最新AI超级算力Blackwell GPU平台即将登陆亚马逊云科技

作者:新闻助手
2024-03-19 03:39
今天凌晨,英伟达在 GTC 大会上推出了最新一代 GPU 架构 Blackwell 及整套系统。在 Keynote 上,黄仁勋表示,已有多家科技公司和传统企业正在引入新一代产品。在发布活动后,亚马逊云科技宣布将提供基于英伟达 Grace Blackwell GPU 的 Amazon EC2 实例和 英伟达 DGX Cloud,以提高在数万亿参数 LLM 上构建和运行推理的性能。亚马逊云科技表示,英伟达的超强算力芯片系统与亚马逊云科技强大的 Elastic Fabric Adapte (EFA) 网络连接能力、高级虚

今天凌晨,英伟达在 GTC 大会上推出了最新一代 GPU 架构 Blackwell 及整套系统。在 Keynote 上,黄仁勋表示,已有多家科技公司和传统企业正在引入新一代产品。

英伟达最新AI超级算力Blackwell GPU平台即将登陆亚马逊云科技

在发布活动后,亚马逊云科技宣布将提供基于英伟达 Grace Blackwell GPU 的 Amazon EC2 实例和 英伟达 DGX Cloud,以提高在数万亿参数 LLM 上构建和运行推理的性能。

亚马逊云科技表示,英伟达的超强算力芯片系统与亚马逊云科技强大的 Elastic Fabric Adapte (EFA) 网络连接能力、高级虚拟化 ( Amazon Nitro System ) 和超大规模集群 ( Amazon EC2 UltraClusters ) 等领先技术的结合,使得该平台在加速资源密集型、数万亿参数语言模型的推理工作负载方面实现了巨大飞跃。

在安全性方面,亚马逊云科技的 Nitro 系统、Amazon KMS、EFA 加密 和 Blackwell 加密的集成将为客户提供对其训练数据和模型权重的端到端控制,从而为客户在亚马逊云科技上的生成式 AI 应用程序提供更强的安全性。

Blackwell 也加入了双方合作的 Project Ceiba 项目,该项目专为 NVIDIA 自身的 AI 研发工作设计,是一台亚马逊云科技上托管的采用 DGX Cloud 的 AI 超级计算机,它搭载了 20,736 颗 GB200 Superchips 芯片,并通过第四代 EFA 网络扩展,为每个 Superchip 提供高达 800 Gbps 的低延迟、高带宽网络吞吐量,能够提供 414 exaflops 的计算能力,与之前计划在 Hopper 架构上构建 Ceiba 相比,性能提升了 6 倍。

相关标签:

相关资讯

专为DeepSeek类强推理加速,老黄拿出Blackwell Ultra,下代架构性能还要翻倍

「因为 AI 技术爆发,GTC 大会的规模每年都在扩大,以前人们说 GTC 是 AI 的伍德斯托克音乐节,今年我们搬进了体育场,我觉得 GTC 已经成了 AI 的超级碗,」英伟达 CEO 黄仁勋说道。 「唯一的不同在于每个人都是『超级碗』的赢家。 」北京时间 3 月 19 日凌晨,全世界的目光都汇聚在加州圣何塞 SAP 中心,期待英伟达给出的下一个 AI 大方向。
3/19/2025 10:49:00 AM
机器之心

与DeepMind展开合作,英伟达的物理世界AI正在拓展版图

老黄:机器人的时代已经来临了。
3/19/2025 4:53:00 PM
李泽南

向量数据库的中场战事:长期主义者Zilliz如何全球突围

命运齿轮转动的开始,源于 2023 年的 3 月 23 日的 OpenAI 一次日常更新。 这一天,OpenAI ChatGPT 发布了一个名叫 chatgpt-retrieval-plugin 的插件功能。 而在官方 plugin 给出的标准案例中,OpenAI 专门提到,向量数据库是大模型产品形成长期记忆一个必不可少的组件。
11/28/2024 1:41:00 PM
机器之心