第四范式发布先知AIOS 5.1,升级支持GPU资源池化功能

今天,第四范式先知AIOS 5.1版本正式发布。该版本新增GPU资源池化(vGPU)能力,实现对硬件集群平台化管理、算力资源的按需分配和快速调度,最多节省80%的硬件成本,提高GPU综合利用率多达5-10倍。第四范式先知AIOS 5是行业大模型开发及管理平台。平台以提升企业核心竞争力为目标,在支持接入企业各类模态数据的基础上,提供大模型训练、精调等低门槛建模工具、科学家创新服务体系、北极星策略管理平台、大模型纳管平台、主流算力适配优化等能力,实现端到端的行业大模型的构建、部署、管理服务。在行业大模型的构建过程中,为

今天,第四范式先知AIOS 5.1版本正式发布。该版本新增GPU资源池化(vGPU)能力,实现对硬件集群平台化管理、算力资源的按需分配和快速调度,最多节省80%的硬件成本,提高GPU综合利用率多达5-10倍。

第四范式发布先知AIOS 5.1,升级支持GPU资源池化功能

第四范式先知AIOS 5是行业大模型开发及管理平台。平台以提升企业核心竞争力为目标,在支持接入企业各类模态数据的基础上,提供大模型训练、精调等低门槛建模工具、科学家创新服务体系、北极星策略管理平台、大模型纳管平台、主流算力适配优化等能力,实现端到端的行业大模型的构建、部署、管理服务。

第四范式发布先知AIOS 5.1,升级支持GPU资源池化功能

在行业大模型的构建过程中,为进一步提高算力资源利用率,第四范式先知AIOS 5.1版本新增GPU资源池化(vGPU)能力,拥有五大技术亮点:

全面适配国产/非国产算力,支持混合部署与统一调度算力和显存超分复用,算力切分精细到1%,显存切分以M兆为单位具备千卡级别分布式调度与管理能力支持自定义隔离策略,实现共享或独享算力池利用多任务共享及处理优化技术,推理性能提升10倍以上

了解产品详情,可致电400-898-7788,或扫描下方二维码。

第四范式发布先知AIOS 5.1,升级支持GPU资源池化功能

给TA打赏
共{{data.count}}人
人已打赏
应用

首个超越GPT4o级开源模型!Llama 3.1泄密:4050亿参数,下载链接、模型卡都有了

2024-7-23 11:17:00

应用

番茄小说 AI 协议遭平台作家集体抵制?公司回应:已上线解除条款功能入口

2024-7-23 16:54:22

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索