写点什么

加速开源 AI 大模型开发和部署,红帽公司推出 RHEL AI,开发者预览版已上线

  • 2024-05-10
    北京
  • 本文字数:1786 字

    阅读完需:约 6 分钟

大小:887.99K时长:05:03
加速开源AI大模型开发和部署,红帽公司推出RHEL AI,开发者预览版已上线

近日,红帽公司(Red Hat)在科罗拉多州丹佛市举办了 2024 年红帽峰会。会上,红帽公司宣布推出红帽企业 Linux AI(RHEL AI),这是一款基础模型平台,旨在简化生成式人工智能(GenAI)模型的开发、测试和部署流程。

 

RHEL AI 平台整合了 InstructLab 项目,该项目基于 IBM 研究院开发的大规模对话机器人对齐(LAB)技术,通过分类指导合成数据生成和创新的多阶段调整框架,实现了 AI 模型开发的开放性和易接触性。InstructLab 项目允许开发者通过指定分类下的技能和知识,大规模生成影响模型的合成数据,并利用这些数据训练模型,从而显著减少了对昂贵人工注释和专有模型的依赖。

 


此外,RHEL AI 还集成了 Granite 系列模型,这是 IBM 首个从零开始在最大的可信企业级数据湖上训练开发的生成式大模型集合。Granite 模型采用仅解码器架构,适用于多种自然语言处理任务,包括文本生成、问答系统等。通过将这些模型与 RHEL AI 平台相结合,企业可以更加便捷地利用这些先进的 AI 技术,推动业务创新。

 

该解决方案被封装成一个优化的、可启动的 RHEL 镜像,用于在混合云环境中部署单个服务器,并已集成到 OpenShift AI 中。OpenShift AI 是红帽的混合机器学习运营(MLOps)平台,能够在分布式集群环境中大规模运行模型和 InstructLab。

 

随着 ChatGPT 等生成式 AI 技术的兴起,企业对于 AI 应用的需求日益增加。然而,AI 技术的复杂性和高昂的成本成为了企业实施 AI 策略的障碍。为了降低 AI 创新的门槛,红帽公司通过 RHEL AI 平台,将开源项目的优势引入生成式 AI 领域,为企业提供了更加便捷、经济高效的解决方案。

 

红帽公司表示,RHEL AI 平台的推出将为企业带来诸多优势。首先,通过整合开源授权的 Granite 模型和 InstructLab 工具,RHEL AI 为企业提供了更加灵活、可扩展的 AI 解决方案,使企业能够根据自身需求定制 AI 模型。其次,RHEL AI 平台基于红帽企业 Linux 构建,提供了强大的企业级支持和生命周期保证,确保了 AI 系统的稳定性和可靠性。最后,通过结合红帽 OpenShift AI 平台,企业可以更加便捷地在大规模环境中训练和部署 AI 模型,实现 AI 应用的快速迭代和优化。

 

红帽企业 Linux AI 提供的功能和服务包括:

 

  • 红帽支持和保障的开源许可 Granite 语言和代码模型;

  • 提供支持并具有生命周期管理的 InstructLab 分发版本,这是一种可扩展且成本效益高的解决方案,能够增强大型语言模型(LLM)的功能,并使知识与技能的贡献得到更广泛的用户接纳;

  • 通过 RHEL 镜像方式提供的优化可启动模型运行实例,包括 Granite 模型和 InstructLab 工具包,及优化的 Pytorch 运行时库和针对 AMD Instinct™ MI300X、Intel 和 NVIDIA GPU 以及 NeMo 框架的加速器;

  • 红帽提供的完整企业支持和生命周期保证,从可信的企业产品分发开始,提供 24 小时全天候生产支持和扩展的生命周期支持;

 

那么,RHEL AI 与我们现有的超级云平台有何不同呢?

 

红帽总裁兼 CEO Matt Hicks 表示:“RHEL AI 的主要目标是利用硬件加速,在未来几年内覆盖 NVIDIA、AMD、Intel 等各类硬件,进行模型的训练和运行。用户可以选择来自 Granite 系列的大型语言模型,它是一种语言代码模型,其中包含了商业术语,如版权问题下的赔偿条款,使其使用更为安全可靠。而我们现有的混合平台主要关注的是应用程序的生命周期,通常从 Linux 开始,然后转向 OpenShift、中间件和运行时环境。相较而言,RHEL AI 更专注于为大型语言模型创建业务安全、管理生命周期和提供可预测性,并使您能够对其进行修改。由于大型向量模型的更新速度更快,因此它们的生命周期会更短。这是一个专为引入新类别硬件而设计的堆栈,类似于我们推出 RHEL 时所做的工作,这次目标是支持大型语言模型,而不仅仅是传统的 Python、Perl 和 PHP 应用程序。我们对这个套件非常兴奋,因为它使客户更容易地在生产环境中运行这些模型,并对它们的功能和安全性有了更多信心。”

 

“对企业来说,生成式 AI(GenAI)代表了一次革命性的飞跃,但这需要企业真正部署起来,并针对其具体业务需求使用 AI 模型。通过结合红帽 OpenShift AI 的广泛应用,RHEL AI 和 InstructLab 项目旨在降低混合云中生成式 AI 所面临的多种挑战,从数据科学技能的限制到巨大的资源需求,同时促进企业的部署并推动上游社区的创新。”红帽高级副总裁兼首席产品官 Ashesh Badani 如是说。

 

值得一提的是,红帽企业 Linux AI 目前已作为开发者预览版提供。

 

开发者预览版地址:https://www.redhat.com/en/technologies/linux-platforms/enterprise-linux/ai

 

2024-05-10 16:546986
用户头像
李冬梅 加V:busulishang4668

发布了 1130 篇内容, 共 750.4 次阅读, 收获喜欢 1275 次。

关注

评论

发布
暂无评论
发现更多内容

多元 CPU 性能调优的技术挑战、产品设计和业务实践

Baidu AICLOUD

性能调优 cpu加速 btune

为什么Toncoin是加密货币开发的下一个重大事件

区块链软件开发推广运营

dapp开发 区块链开发 链游开发 NFT开发 公链开发

捷途山海T2预售开启,装甲级电池防护,让您出行无忧

极客天地

使用 TypeScript 从零搭建自己的 Web 框架:领域特定语言(DSL) 与 Prisma 模型

RoyLin

typescript

浪潮信息持续更新“源2.0”基础大模型能力

财见

iPaaS与ESB: 解密企业集成领域的两大利器差异

RestCloud

数字化转型 ESB API 企业集成 ipaas

Kafka 迁移工具 MirrorMaker2 原理起底

AutoMQ

大数据 kafka 云原生 AutoMQ MirrorMaker2

Penpad生态再迎新进展,Season 2 ETH质押量超200万美元

西柚子

鸿蒙HarmonyOS实战-ArkUI组件(Stack)

蜀道山

鸿蒙 HarmonyOS stack 鸿蒙开发 鸿蒙系统

和鲸科技将参与第五届空间数据智能学术会议并于应急减灾与可持续发展专题论坛做报告分享

ModelWhale

人工智能 大数据 空间数据库 空间数据智能学术会议

东周APP:投资新兴实业资产,助力实体经济高质量发展

极客天地

如何在面试中应对编程与算法面试?

霍格沃兹测试开发学社

华为云CodeArts IDE For Python 快速使用指南

华为云

Spring开发:动态代理的艺术与实践

华为云开发者联盟

spring 开发 华为云 华为云开发者联盟 企业号2024年4月PK榜

软件测试学习笔记丨后端接口基本开发 - Spring boot项目搭建

测试人

软件测试 测试开发 spring-boot

搞垮一家SaaS公司最快的方法

ToB行业头条

一本书精通推荐算法,轻松搞定入门、面试、进阶

博文视点Broadview

软件测试学习笔记丨Jenkins api接口

测试人

软件测试 jenkins API 测试开发

一文读懂BTC生态新贵Giants Planet,将L2与现实世界整合

西柚子

海外云手机为什么适合社媒运营?

Ogcloud

云手机 海外云手机 tiktok云手机 云手机海外版 电商云手机

拿到鹅厂的Offer啦!

王磊

Java 面试

大模型时代,嫘祖也掌握了「新质生产力」!

白洞计划

AI

掌握 HTTP:网络通信的核心技术详解

Liam

程序员 前端 Web 后端 HTTP

鸿蒙HarmonyOS实战-ArkUI组件(Flex)

蜀道山

鸿蒙 HarmonyOS Flex 鸿蒙开发 鸿蒙系统

一文读懂BTC生态新贵Giants Planet,将L2与现实世界整合

加密眼界

用海外云手机高效率运营TikTok!

Ogcloud

云手机 海外云手机 tiktok云手机 云手机海外版 跨境云手机

加速开源AI大模型开发和部署,红帽公司推出RHEL AI,开发者预览版已上线_生成式 AI_李冬梅_InfoQ精选文章