写点什么

第四范式发布先知 AIOS 5.1,升级支持 GPU 资源池化功能

  • 2024-07-23
    北京
  • 本文字数:433 字

    阅读完需:约 1 分钟

大小:240.51K时长:01:22
第四范式发布先知AIOS 5.1,升级支持GPU资源池化功能

今天,第四范式先知 AIOS 5.1 版本正式发布。该版本新增 GPU 资源池化(vGPU)能力,实现对硬件集群平台化管理、算力资源的按需分配和快速调度,最多节省 80%的硬件成本,提高 GPU 综合利用率多达 5-10 倍。



第四范式先知 AIOS 5 是行业大模型开发及管理平台。平台以提升企业核心竞争力为目标,在支持接入企业各类模态数据的基础上,提供大模型训练、精调等低门槛建模工具、科学家创新服务体系、北极星策略管理平台、大模型纳管平台、主流算力适配优化等能力,实现端到端的行业大模型的构建、部署、管理服务。



在行业大模型的构建过程中,为进一步提高算力资源利用率,第四范式先知 AIOS 5.1 版本新增 GPU 资源池化(vGPU)能力,拥有五大技术亮点:

  • 全面适配国产/非国产算力,支持混合部署与统一调度

  • 算力和显存超分复用,算力切分精细到 1%,显存切分以 M 兆为单位

  • 具备千卡级别分布式调度与管理能力

  • 支持自定义隔离策略,实现共享或独享算力池

  • 利用多任务共享及处理优化技术,推理性能提升 10 倍以上

 

了解产品详情,可致电 400-898-7788,或扫描下方二维码。



2024-07-23 16:498628

评论

发布
暂无评论
发现更多内容

数组与链表学习总结

Nick

数组 链表 数据结构与算法

大作业二

jizhi7

第十周作业总结

jizhi7

第十一周课后练习

Binary

第十一周 安全稳定知识课后作业

简简单单

快递架构设计

梧桐

产品 0 期 - 第四/五周作业

Jxin

第十一周 学习总结

简简单单

对接量化钱包区块链开发

v16629866266

MyBatis专栏 - 二级缓存

小马哥

Java mybatis 七日更 2月春节不断更

week11 作业

zbest

记录一次BAT一线互联网公司前端JavaScript面试

我是哪吒

JavaScript 学习 面试 大前端 2月春节不断更

2 期架构师训练营 - 第十一周作业与总结

云飞扬

架构师训练营第2期

「架构师训练营 4 期」 第六周 - 001&2

凯迪

架构师训练营 4 期

大作业一:

未来已来

Python进阶丨如何创建你的第一个Python元类?

华为云开发者联盟

Python 编程 python元类 对象 装饰器

架构内容

梧桐

2 期架构师训练营 - 第十三周作业与总结

云飞扬

架构师训练营第2期

第十二周总结

jizhi7

第十三周-总结

jizhi7

与前端训练营的日子 -- Week15

SamGo

学习

第11周学习总结

Binary

华云大咖说 | 大型分布式监控系统建设经验

华云数据

2 期架构师训练营 - 第十周作业与总结

云飞扬

架构师训练营第2期

iOS中MVC、MVP、MVVM、VIPER等技术框架的选型与实践

行者

架构设计 Architecture

大作业一

jizhi7

2 期架构师训练营 - 第十二周作业与总结

云飞扬

架构师训练营第2期

第十一周 - 总结

jizhi7

怀乡恋土的人们

熊斌

学习 2月春节不断更

同时拿到BATJMD的Offer是怎样的一种体验?

冰河

面试 面经 offer 一起进大厂 BATJMD

3. 无转折不编程,滚雪球学 Python

梦想橡皮擦

Python python从入门到精通 2月春节不断更 python入门

第四范式发布先知AIOS 5.1,升级支持GPU资源池化功能_AI&大模型_第四范式技术团队_InfoQ精选文章