英伟达再次给我们带来了一点生成式 AI 的震撼。
生成式 AI 是最前沿的科技发展方向之一,正在举行的消费电子大展 CES 2024 上,我们正在见证新变革的发生。
昨天凌晨,英伟达在一场半小时的特别演讲中介绍了一系列 AI 加持的新技巧,通过整个技巧堆栈创新加速生成式 AI 在 AI PC 端落地。演讲结束后,NVIDIA 股价应声上涨超过 6%,领跑科技美股。今天更是持续上涨,市值突破 1.31 万亿美元。
这一次,英伟达通过领先业界的理解,结合十几年的 AI 生态精心布局,真正实现了 AI PC 的落地,其发布的一系列产品也已具备了相当的实用性和前瞻性。
NVIDIA ACE 启动生成式 AI 变革游玩体会
去年,整个科技界经历了生成式 AI 的爆发。随着技巧快速发展,利用落地也在加速进行中,AI PC 是很多厂商最近关注的重点。作为 AI 产业领导者的英伟达也早有准备。
在 CES 上,英伟达展示了大量生成式 AI 的服务能力。
其中,最吸引眼球的当属 NVIDIA ACE(NVIDIA Avatar Cloud Engine)微服务生成式 AI 改变游玩体会。
用给大语言模型设定角色扮演的方式调教好 NPC,在游玩场景中你就能看见 NPC 之间基于各自角色的自然交流了,每次内容都是不一样的:
如果三次元的玩家加入进对话之中,直接在屏幕前与 NPC 展开一段闲聊,它们也能应答如流,看起来很自然:
以上展示启动游玩中交互式虚拟数字人物的幕后英雄正是 NVIDIA ACE,在去年 5 月首次被提出,其利用 AI 启动的自然语言交互技巧,可以为游玩中的非玩家角色(NPC)带来智能。
在 CES 2024 特别演讲中,英伟达 ACE 高级产品经理 Seth Schneider 简单介绍了 ACE 的技巧。据介绍,目前呈现出的演示已经可以解释玩家的语音,并将其转换为文本。随后,经过转录文本会被输入到云端的大语言模型上以生成 NPC 的响应。响应文本被输入 Omniverse Audio2Face 对生成的语音进行口型同步,然后在游玩中进行渲染。
通过英伟达本次开放的 Production Microservices,开发者们可以更加轻松地给 NPC 加智商,让玩家在游玩里和 AI 游玩 AI 每次互动的效果都不一样。
据介绍,开发者可以通过 ACE 微服务、NVIDIA Audio2Face(A2F)等 AI 模型,以及 NVIDIA Riva 自动语音识别(ASR)技巧构建起交互式的虚拟数字化身,前者能利用声音制作出表情丰富的面部动画,后者可开发定制的多语言语音和翻译利用,以供虚拟数字人直接使用。
已经开始采用 ACE 的开发商里面不乏我们熟悉的面孔:米哈游、网易、掌趣、腾讯、育碧,还有一系列面向元宇宙和数字形象的公司,如 Convai、Charisma.AI、Inworld 和 UneeQ 等。
目前尚不清楚生成式 AI 启动的 NPC 将首先入驻哪些游玩,但英伟达和 Convai 声称该技巧将与 Unreal Engine 和 Unity 等流行的游玩引擎「无缝」集成,看来距离实际利用应该已经不远了。
生成式 AI 的超强外围:三款 GPU 连发
基于隐私、成本和延迟考虑,本地运行生成式 AI 模型是至关重要的。
为了带动生成式 AI 等新类型利用,英伟达本届 CES 也准备好了新的 GPU。
本次,英伟达发布了三款 GeForce RTX 40 SUPER 系列 GPU,包括 GeForce RTX 4080 SUPER、GeForce RTX 4070 Ti SUPER 和 GeForce RTX 4070 SUPER,它们将作为 AI PC 的外围,为最新游玩供应超强动力。
未来的 3A 游玩大作需要越来越多的 AI 启动的技巧,如超分辨率(Super Resolution)、帧生成(Frame Generation),光芒重建(Ray Reconstruction)来与光芒追踪技巧相结合的能力。因此,AI 加速就显得尤为重要。
在这其中,RTX 4070 SUPER 供应了 36 SHADER TFLOPS、82 RT TFLOPS 和 568 AI TOPS 的 AI 算力,外围数量比 RTX 4070 多 20%,使其仅使用 3090 的一小部分功耗就实现了超越 3090 的机能。借助 DLSS 3,RTX 4070 SUPER 的机能领先优势将扩大到 1.5 倍。RTX 4070 SUPER 将于 1 月 17 日开售,建议零售价为人民币 4899 元起。
机能更为强大的 RTX 4080 SUPER 供应 52 SHADER TFLOPS、121 RT TFLOPS 和 836 AI TOPS,支持 4K 全景光芒追踪游玩。
RTX 4080 SUPER 的机能比不支持 DLSS 帧生成技巧的 RTX 3080 Ti 快 1.4 倍,在传统光栅化游玩中也能供应惊人机能。凭借 836 AI TOPS,DLSS 帧生成 (Frame Generation) 带来额外机能提升,RTX 4080 SUPER 机能是 RTX 3080 Ti 的 2 倍。RTX 4080 SUPER 拥有更多的外围和更快的显存,机能更胜一筹。RTX 4080 SUPER 将于 1 月 31 日开售,建议零售价为人民币 8099 元起。
RTX 4070 Ti SUPER 供应 44 SHADER TFLOPS、102 RT TFLOPS 和 706 AI TOPS,可在 1440p 乃至 4K 分辨率的超高帧率下最大限度地发挥游玩机能。与 RTX 4070 Ti 相比,它拥有更多外围,显存容量增至 16GB,显存位宽为 256 bit,显存带宽大幅提升至 672 GB/s。比 RTX 3070 Ti 快 1.6 倍,开启 DLSS 3 后比 RTX 3070 Ti 快 2.5 倍。RTX 4070 Ti SUPER 将于 1 月 24 日开售,建议零售价为人民币 6499 元起。
RTX 40 系列的 SUPER 版 GPU 均会在本月上市,相比在售的「标准版」加量不加价,供应了更好的机能。看到目前的规格,4070Ti SUPER 应该是其中性价比最高的一款了。
助推下一代游玩画面
接下来,我们看下 RTX 显卡助推游玩画面的变革。
利用 RTX 显卡的 AI 能力,即将上市的 3A 游玩大作《地平线:西之绝境》展现出了各种前所未有的画面效果:
除了 DLSS 3 之外,游玩还将支持 DLAA 和 NVIDIA Reflex。利用 AI 加持的技巧,游玩的帧率与画质都将有明显的提升。英伟达表示,各类 RTX 技巧还将被利用在暗黑 4、Pax Dei 等游玩上。
利用光芒追踪和生成式 AI 工具,英伟达还在帮助老游玩快速升级到 4K 版,一部《半条命 2 RTX》让老玩家们回忆起了当年。在 RTX Remix 版游玩中,平均世界材质的像素是原始游玩的 8 倍,服装等内容材质的几何细节更是原始游玩的 20 倍:
这就是 RTX 的 AI 超能力所创造的宇宙。
AI PC,未来还有更多可能性
生成式 AI 时代,越来越多的行业正在经历人工智能技巧的革命。
面对各个行业要把「利用重做一遍」的新机遇,不论科技公司还是硬件厂商都在思考新的游玩规则将会是什么。从对元宇宙的推崇,到自动驾驶、工业机器人技巧的探索,再到对基础科学领域的持续支持上,我们都能看到英伟达引领 AI 时代的身影。
而对于大多数普通用户来说,由 RTX 加速的生成式 AI,将会为 AI PC 体会供应强大动力。这也许会是我们可以最先体会到新技巧的方式。
正如英伟达 CEO 黄仁勋所说,生成式 AI 是计算史上最重要的平台转变,它将改变包括游玩在内的所有行业。在消费级电子上,未来似乎已经到来了。