【FCon上海】与行业领袖共话AI大模型、数字化风控等前沿技术。 了解详情
写点什么

Oracle 正式发布 MySQL HeatWave Lakehouse,数据查询速度更快、扩展性更强

  • 2023-07-28
    北京
  • 本文字数:1768 字

    阅读完需:约 6 分钟

Oracle正式发布MySQL HeatWave Lakehouse,数据查询速度更快、扩展性更强

AI 大模型超全落地场景&金融应用实践,8 月 16 - 19 日 FCon x AICon 大会联诀来袭、干货翻倍!

近日,Oracle 宣布推出MySQL HeatWave Lakehouse,让客户能够像在数据库内查询数据一样快地查询对象存储中的数据。


MySQL HeatWave Lakehouse 支持各种文件格式(例如 CSV、Parquet)和从其他数据库导出的文件,并且可以在同一查询中将对象存储文件数据与 MySQL 数据库中的数据相结合。对象存储中的文件由 HeatWave 直接查询,而无需将数据复制到 MySQL 数据库中。因此,在对象存储中查询数据方面,MySQL HeatWave Lakehouse 为查询处理、数据加载速度、集群预配时间和自动化奠定了新的可扩展性和性能标准。

 

甲骨文公司首席企业架构师 Edward Screven 表示:“超过 80%的数据存储在文件系统中,该数字还在不断增长。客户希望将各种外部数据与内部事务处理数据集成和分析,但处理起来往往过于复杂或成本太高。MySQL HeatWave Lakehouse 能够帮助客户将对象存储中的数据与数据库数据结合在一起,让客户能够轻松获得宝贵的实时洞察,同时显著提高查询性能并降低数据加载速度。”

对象存储中的数据查询速度,与数据库中的数据查询速度一样快

 

10 TB TPC-H*基准测试所示,使用 MySQL HeatWave Lakehouse 以常用文件格式查询对象存储中的数据的速度,与在 MySQL 数据库中查询数据的速度一样快。这是因为 MySQL HeatWave 的内置功能MySQL Autopilot 提供了基于机器学习的自动化,可以从查询执行中学习,并改进未来查询的执行计划。MySQL Autopilot 是 MySQL HeatWave 一项特别的创新功能。基于 Oracle 云基础设施远程软件服务(Oracle Cloud Infrastructure, OCI)的 MySQL HeatWave 采用 AMD EPYC™处理器。

 

AMD 数据中心解决方案业务小组执行副总裁兼总经理 Forrest Norrod 表示:“AMD 和 MySQL HeatWave 工程团队正在密切合作,合力优化 AMD EPYC 处理器与 MySQL HeatWave 的性能,以利用新的处理器功能。得益于本次合作,在 AMD EPYC CPU 驱动的 OCI 实例上运行 MySQL HeatWave 的 MySQL 客户可在关键业务工作负载方面获得较为突出的性价比,其中包括针对海量对象存储数据的实时分析。”


甲骨文公司中国区技术咨询部高级总监嵇小峰表示:“如今,任何一个企业的数据源会越来越多。对于一个制造业而言,有很多从生产线上留存下来的 IoT 的数据、MES 生产过程中的数据以及一些外部来数据,这些数据需要跟现在跑的生产系统一起来做 journal 的分析、查询。这时候外部数据源在对象存储里面的体量是非常大的。”

 

MySQL HeatWave 的性能源自于其横向扩展架构,该架构支持通过大规模并行来配置集群、加载数据和处理高达 512 个节点的查询。此外,MySQL Autopilot 的增强功能可自动为对象文件创建元数据,并动态适应底层对象存储的性能,确保在 OCI 区域中都能提供出色的性能。

 

MySQL HeatWave 是重要的云端服务,可在单一的 MySQL 数据库服务中提供事务处理、实时分析、机器学习、数据池查询和基于机器学习的自动化功能。作为 Oracle Distributed Cloud 策略的核心,MySQL HeatWave 在 OCI 中提供,在 Amazon Web Services 中原生提供,作为 Oracle Database Service for Azure 的一部分提供,以及通过 OCI Dedicated Region 在客户数据中心内提供。

客户、合作伙伴和分析机构如何评价?

 

Natura&Co 解决方案架构师 Fabricio Rucci 表示:“数据呈指数级增长,我们在数据湖中存储的数据量也是如此。能够使用标准 MySQL 语法,在数据库和对象存储中查询数据获得实时洞察,这一点对 Natura 而言非常重要。这为我们提供了新的机会,如果我们可以比竞争对手更快地分析所有的数据,就可能获得新的竞争优势。”

 

德勤咨询公司(Deloitte Consulting)云基础设施与工程团队负责人 Henry Tullis 表示:“无论是从对象存储加载数据,还是在对象存储上运行查询,HeatWave Lakehouse 都展示了良好的可扩展性。随着数据量以及 HeatWave 集群大小的增加,加载时间和查询时间几乎保持不变。HeatWave Lakehouse 在数据管理方面的这种横向扩展特性是高效处理大量数据的关键。”


Constellation Research 副总裁兼首席分析师 Holger Mueller 表示:“自大数据出现以来,大数据/湖仓一体查询的速度大大低于事务查询速度。MySQL HeatWave 打破了这一局面,证明了 Lakehouse 可以实现与事务查询同等的性能,这是很多人未曾听过、未曾想过的。通过查询性能奇偶校验,HeatWave 使 CxOs 无需再担心数据需要存储在哪里、如何查询数据。其中的秘诀在于能够优化查询的 HeatWave 的 Autopilot。HeatWave 团队再一次取得了业内突破性成果。”


2023-07-28 17:183627
用户头像
李冬梅 加V:busulishang4668

发布了 874 篇内容, 共 448.0 次阅读, 收获喜欢 1046 次。

关注

评论

发布
暂无评论
发现更多内容

深入理解Prometheus: Kubernetes环境中的监控实践

不在线第一只蜗牛

Kubernetes 环境监测

mac压缩解压工具:Keka for Mac 中文版下载

你的猪会飞吗

Mac软件下载站 mac破解软件下载

IntelliJ IDEA 2023 for mac(Java语言开发集成环境)v2023.3.2中文激活版

iMac小白

SecureCRT for mac(好用的终端SSH仿真工具)v9.4.3正式注册激活版

iMac小白

VMware Fusion Pro 13 for Mac(VM虚拟机)v13.5.2中文激活版

iMac小白

Macs Fan Control Pro for mac( 电脑风扇控制软件)v1.5.16中文激活版

iMac小白

关于代购系统带来的便利性的研究报告

Noah

WPF/C#:如何实现拖拉元素

EquatorCoco

C# WPF

中高级前端必修技能哪些,看下你都修了没?

伤感汤姆布利柏

Apache Doris 2.0.12 版本正式发布

SelectDB

大数据 数据仓库 数据分析 实时数仓 Doris

谈谈iOS中的原生物理引擎——UIDynamic的应用

珲少

IoTDB Committer+Ratis PMC Member:“两全其美”的秘诀是?

Apache IoTDB

如何使用 Ordinals API 在 Bitcoin 网络上开发 Web3 应用

NFT Research

NFT NFTScan Ordinals

Swoole v6 能否让 PHP 再次伟大?

快乐非自愿限量之名

php 后端

网络流量的智能调度者

通明湖

负载均衡

Beyond Compare 4 for Mac(文件同步对比工具)v4.4.7(28397)中文版

iMac小白

Microsoft Office LTSC 2021 for Mac(office全家桶)v16.80中文正式版

iMac小白

Final Cut Pro for Mac(fcp专业视频后期制作)v10.8.0中文版

iMac小白

基于LangChain手工测试用例生成工具

测吧(北京)科技有限公司

测试

观测云:开启现代化企业监控的新篇章

可观测技术

监控

鸿蒙技术之WebSocket连接详解

彭康佳

android 鸿蒙 websocket

2024年6月,Altair被Gartner魔力象限评为数据科学与机器学习平台领导者

Altair RapidMiner

人工智能 机器学习 AI 数据分析 数据科学

多模态GPT-V出世!36种场景分析ChatGPT Vision能力,LMM将全面替代语言大模型?

京东科技开发者

首个实时 AI 视频生成技术发布;科大讯飞发布星火大模型 4.0 丨 RTE 开发者日报

声网

深入理解Spring AOP中的@EnableAspectJAutoProxy

不在线第一只蜗牛

腾讯云参编信通院DataOps2.0,助力企业高效数据开发与管理

腾讯云大数据

wedata

小白算法集训营-大幅提升刷题量,快速逃离新手区[慕Kwang]

编程猿

算法

Cornerstone for Mac(最好用的SVN管理工具)v4.2永久激活版

iMac小白

Downie 4 for Mac(视频下载工具)兼容14系统v4.7.19中文版

iMac小白

Linux 下的性能监控与分析技巧

秃头小帅oi

Oracle正式发布MySQL HeatWave Lakehouse,数据查询速度更快、扩展性更强_数据湖仓_李冬梅_InfoQ精选文章