写点什么

Confluent Cloud 通过新的 Flink 功能简化了实时 AI 开发

  • 2025-05-14
    北京
  • 本文字数:996 字

    阅读完需:约 3 分钟

大小:491.00K时长:02:47
Confluent Cloud通过新的Flink功能简化了实时AI开发

Confluent Cloud for Apache Flink引入了 Flink 原生推理(Flink Native Inference)、Flink 搜索和内置的机器学习(ML)函数,提供了一个统一的 Flink SQL 解决方案。这些新功能旨在通过消除工作流程的碎片化、降低成本和增强安全性来简化实时 AI 开发。

 

这些新功能是对去年该服务的GA发布之后的跟进。Confluent 的一位总监Adi Polak详细阐述了 Flink 原生推理(Flink Native Inference)、Flink 搜索和内置机器学习(ML)函数为企业开发人员构建 AI 应用程序所解决的痛点:

 

如今,开发人眼必须使用不同的工具和语言来处理 AI 模型和数据处理管道,这导致了复杂且碎片化的工作流。从而导致数据管道的泛滥,数据分散在多个数据库和系统中。这种缺乏数据集成和编排的情况可能导致效率低下、网络和计算成本的增加以及开发时间的延长,使得 AI 应用程序的扩展变得具有挑战性,从而很难从 AI 投资中立即看到价值。

 

这些新功能通过提供一个基于Flink SQL的统一解决方案来解决这些痛点。Flink 原生推理(Flink Native Inference)允许任何开源 AI 模型直接在 Confluent Cloud 内运行。Polak 解释道:

 

这些开源和经过微调的 AI 模型被托管在 Confluent Cloud 内,因此无需下载外部文件或管理运行它们的 GPU。与将数据发送到远程模型端点不同,原生推理将最先进的开源 AI 模型带到客户的私有数据中,使他们能够轻松使用 Flink SQL 构建事件驱动的 AI 系统。

 

这种方法消除了网络跳转,通过将数据保留在平台内来增强安全性,并降低延迟以实现更快的推理,这对于实时 AI 洞察至关重要。

 

Flink 搜索简化了跨多个向量数据库的数据丰富化操作,而内置的机器学习函数使更高级的数据科学能力对更广泛的开发人员可用。

 

关于安全性、成本效率和运维开销,Polak 强调了 Confluent 统一方法的优势:

 

通过统一数据处理和 AI 工作负载,Confluent 降低了组织的运维开销,使开发和部署 AI 应用程序变得更容易、更快。借助 Confluent Cloud 的全托管 AI 服务,企业可以通过混合编排数据处理工作负载、在预定义的计算预算内更有效地使用 CPU 和 GPU 来节省成本,并且从没有云入口或出口费用中受益。由于数据从未离开离过 Confluent Cloud,专有数据不会与第三方供应商或模型提供商共享,因此安全性也得到了增强。

 

根据公司的说法,这些新能力消除了传统上阻碍实时 AI 开发的复杂性和碎片化——降低了在企业环境中构建实时 AI 应用程序的复杂性。

 

原文链接:

https://www.infoq.com/news/2025/03/confluent-cloud-flink-ai/

2025-05-14 12:003980

评论

发布
暂无评论

Python 报错 ValueError list.remove(x) x not in list 解决办法

AlwaysBeta

Python 编程

基于卷积神经网络的猫狗识别

Peter

机器学习 深度学习 tensorflow keras

自己动手写Docker系列 -- 5.7实现通过容器制作镜像

Go Docker 4月月更

大厂工程师所热衷的DPDK到底是个什么东西?

赖猫

Linux 网络协议栈 DPDK

图计算 101:图计算的类型、语言与系统

6979阿强

大数据 图计算 GraphScope 图分析 图数据

读《Software Engineering at Google》(04)

术子米德

架构师成长笔记

简单的常量和变量的运算实例

CRMEB

ThreadLocal理解及使用

Rubble

4月日更 4月月更

读《Software Engineering at Google》(03)

术子米德

架构师成长笔记

在线CSV转Excel工具

入门小站

工具

一文带你搭建RocketMQ源码调试环境

悟空聊架构

RocketMQ 4月日更 悟空聊架构 4月月更

seaborn绘制箱型图

Peter

可视化 数据可视化 seaborn

jupyter notebook换皮肤

Peter

Python 机器学习 数据分析 Jupyter Notebook

Docker 实战教程之从入门到提高(三)

汪子熙

Docker 容器 虚拟化 容器镜像 4月月更

腾讯阿里工程师所热衷的DPDK到底是个什么东西?该如何学习?

Linux服务器开发

Linux服务器开发 DPDK C++后台开发 Linux后台开发 虚拟化技术

linux之chroot命令

入门小站

Linux

使用 Helm 部署 GraphScope

6979阿强

大数据 图计算 GraphScope 图分析 图数据

从安装到编译: 10分钟教你在本地使用和开发GraphScope

6979阿强

大数据 图计算 GraphScope 图分析 图数据

在 K8s 上运行 GraphScope

6979阿强

大数据 图计算 GraphScope 图分析 图数据

DevSecOps:云原生安全风险“避坑”指南

York

容器 云原生 安全 DevSecOps

从 Redux 源码谈谈函数式编程

有道技术团队

JavaScript Redux

源声|操作系统十年磨一剑,幕后的坚挺、不懈与客户第一

OpenTEKr

Linux 开源 操作系统 社区运营

“双碳”强风吹拂:数据中心的绿色改革图谱

脑极体

万字长文:直击关于Docker所必须了解的知识

穿过生命散发芬芳

Docker 4月月更

基于机器学习算法的钢材缺陷检测分类

Peter

Python 决策树 随机森林 集成学习 LightGBM

海洋元宇宙Aquqnee,给人们全新游戏体验

BlockChain先知

深入浅出 Ext4 块和 Inode 分配器的优化(上)

焱融科技

云计算 高性能 文件存储 文件系统

用 GraphScope 像 NetworkX 一样做图分析

6979阿强

大数据 图计算 GraphScope 图分析 图数据

GraphScope v0.12.0 版本发布

6979阿强

大数据 图计算 GraphScope 图分析 图数据

Flutter 2.0的路由把我搞蒙了!!!

岛上码农

flutter 路由 移动端开发 4月月更 跨平台开发

在线IEEE浮点二进制计算器工具

入门小站

工具

Confluent Cloud通过新的Flink功能简化了实时AI开发_大数据_Steef-Jan Wiggers_InfoQ精选文章