“All in Cloud”之后,和你聊聊「云原生DevOps的Kubernetes技巧」 了解详情
写点什么

华为发布业界首款 AI-Native 数据库,挑动了谁的神经?

  • 2019 年 5 月 16 日
  • 本文字数:2538 字

    阅读完需:约 8 分钟

华为发布业界首款AI-Native数据库,挑动了谁的神经?

2019 年 5 月 15 日,华为在北京举办分布式数据库及存储新品发布会,重点发布了两款产品:业界首创的 AI Native 分布式数据库 GaussDB 和分布式存储产品 FusionStorage 8.0。其中,GaussDB 在发布之前就备受国内外媒体关注,不少媒体曾在文章中提及此举将对数据库老兵 Oracle 构成影响。


业界首个 AI-Native 数据库 GaussDB

传统企业数据处理以结构化数据为主,数据库+BI 应用为主要模式。智能时代,数据爆炸式增长,数据库系统规模越来越大,数据处理从结构化数据向结构化+非结构化的多样性数据处理转变,传统的人工维护方式将面临巨大挑战。因此,华为重定义数据库架构,将 AI 技术引入数据库,大幅提升数据库自动化管理和优化能力。


据介绍,GaussDB 是业界首款 AI-Native 数据库,也是业界第一款支持 ARM 的企业级数据库。其有两大创新:一是首次将人工智能技术融入分布式数据库的全生命周期,实现自运维、自管理、自调优、故障自诊断和自愈。在交易、分析和混合负载场景下,基于最优化理论,首创基于深度强化学习的自调优算法,调优性能比业界提升 60%以上;二是通过异构计算创新框架充分发挥 X86、ARM、GPU、NPU 多种算力优势,在华为实验室采用权威标准测试集 TPC-DS 进行测试的情况下,其性能比业界提升 50%,排名第一。


根据了解,AI-Native 数据库分为五个等级:


1、AI Advised,利用外挂 AI 引擎给出数据库优化建议,减少数据库管理员的负担;


2、AI Assisted,数据库内置 AI 引擎,实现在线辅助优化,提升数据库管理效率;


3、AI Enhanced,一方面将 AI 植入数据库内核组件、核心算法和数据结构,实现数据库自优化;


4、AI Assembled,实现数据库自愈并最优化 AI;


5、AI Designed,通过 AI 技术实现数据库的设计、验证、开发,达到全场景智能和普惠 AI 的目的。


现场,华为通过案例演示了 AI-Native 数据库 GaussDB 的强悍性能,比如在 OLAP 分析场景和 OLTP 事务场景下,使用 AI-Native 智能调优模式平均比其他自动调优方法性能提升 68%,比 DBA 调优提升 54%。


华为提出的 AI-Native 数据库,除了用 AI 理念重构数据库内核和算法之外,还考虑了如何在通用计算摩尔定律濒临失效的情况下,利用 GPU、NPU 等 AI 芯片算力来大幅提升 AI 算法的性能。


目前,GaussDB 支持本地部署、私有云、公有云等多种场景。在华为云上,GaussDB 为金融、互联网、物流、教育、汽车等行业客户提供全功能、高性能的云上数据仓库服务。这也是华为发布会的很大不同,产品发布的那一刻基本已经成功落地实践。


华为的 AI 能力

对于华为的 AI 能力,想必不少开发者都有所耳闻。在去年的HUAWEI CONNECT 2018大会上,华为就曾推出 ModelArts 全流程平台,可以让开发者更快地上手 AI、更快地加速模型训练和部署;更懂开发者的视觉 AI 应用开发平台 HiLens,搭载昇腾 310,因而可提供了强大的算力和存储空间,满足了较大的图像处理运算需求,甚至实现 1 秒百帧的处理能力及毫秒级人脸检测;离线的开发套件 Atlas 200,方便开发者在离线状态下研究和开发。


众所周知,华为有一个“传说中的”2012 实验室,是华为探索未来科技无人区的主战部队。此前,InfoQ 曾受邀参观了其中的诺亚方舟实验室,这是华为 AI 研发中心,展示的亮点为“人工智能能力演示”,如智慧终端的计算视觉、语音助手、推荐搜索;智慧企业的供应链大脑、问答系统等;热技术实验室则聚焦高集成封装、高密空冷、高效液冷/相变,展示器件低热阻、仿生散热器、相变液冷、声学降噪材料、流场可视化测试等技术。而此次发布的 GaussDB,就是在 2012 实验室领导下开发的。


在 AI 领域,华为一直坚持从芯片开始往上做到应用框架,基本覆盖了人工智能的所有方向,换句话说,就是支持人工智能全栈全场景。截止 2019 年 3 月底,华为云共发布有 59 个服务,160+的功能。这很好得解释了为什么华为有能力开发业界首款 AI-Native 数据库 GaussDB,并获得如此高的性能提升。


为什么是云?

如华为方面所言,GaussDB 运行在云平台之上。其实,这个消息本身并不是很令人惊讶,即便是地位还算稳固的 Oracle 近年也一直在遵守云优先的策略,即功能更新会优先在云平台进行,这也可以理解为云业务拉新的一种手段。


传统的数据库体系结构已有 30 多年的历史,专为本地部署,本地存储和单机数据库实例而设计和优化,此后很长一段时间内,该体系结构未针对公有云环境进行优化。在公有云环境下,计算和存储通过网络分离以支持多租户数据库实例并 scale out 向两端扩展;并不要求单个节点的高可靠性。


举例来说,假设一个本地数据库的每个数据库实例都有本地存储,为了支持高可用性,通常部署一个备实例并使用数据库内部复制机制将数据库日志(MySQL binlog)发送到备实例重建数据库副本。目前,大多数云厂商都采用类似机制来支持云数据库高可用性。但是,这种内部复制机制并没有利用云存储已经通过存储层复制提供的可靠性,这导致大量存储和带宽浪费。实际上,备数据库实例可以通过云存储与主实例共享数据,不仅可以节省磁盘空间和带宽,还可以为云数据库服务提供快速 RTO。


很明显,在将传统数据库迁移上云时,需要重新设计和优化数据库系统。过去几年,主要云供应商,比如 AWS,已经做了部分工作。预计未来几年,更多云和数据库供应商将遵循这一趋势,构建某种形式的云原生数据库技术。此外,Gartner 预测,到 2019 年,90%的云数据库架构将支持计算和存储分离。


因此,根据云平台设计并提供 AI-Native 数据库 GaussDB 显然是目前最合适的方式。过去几年,华为一直在努力发展云计算业务,主要是为数据中心提供服务器和其他设备,但该公司的研发实验室也在研究企业软件产品。根据华为年度报告显示,去年其企业业务部门(包括面向企业客户的服务器和其他产品)收入增长 24%,至约 110 亿美元,约占该公司 1,060 亿美元总收入的 10%。


据了解,这也不是华为云第一次在云平台对数据库进行探索。自 2016 年 6 月起,华为共发布了 4 大类共 13 个数据库服务。其中,多模数据库 GeminiDB 可以通过一种服务满足多个数据库需要。


此前,华为云自研的关系型数据库 Taurus 也曾公开亮相。作为华为云自研的最新一代云原生分布式数据库,Taurus 完全兼容 MySQL 8.0,采用计算与存储分离、日志即数据的架构设计,支持 1 写 15 读,性能达到原生 MySQL 的 7 倍。


2019 年 5 月 16 日 08:3010792
用户头像
赵钰莹 InfoQ高级编辑

发布了 761 篇内容, 共 461.5 次阅读, 收获喜欢 2458 次。

关注

评论 2 条评论

发布
用户头像
非常值得关注的一点:该数据库是在2012实验室领导下开发的,也说明该实验室不仅仅是有硬件,也有很多软件方向的前沿研究
2019 年 05 月 16 日 14:46
回复
用户头像
听着霸气侧漏啊,观望详后续情如何
2019 年 05 月 16 日 10:43
回复
没有更多了
发现更多内容

压力太大的话,就放点气儿吧

道伟

28天写作

什么容易被记住——造梦师指南

Justin

心理学 28天写作 游戏设计

《第一财经(月刊2021年02期)》

石云升

读书笔记 28天写作 2月春节不断更 第一财经

如何解决深度推荐系统中的Embedding冷启动问题?

王喆

机器学习 深度学习 推荐系统 计算广告 Embedding

线程池面试必考

叫练

面试 线程池 线程池工作原理

关于GaussDB(DWS)的正则表达式知多少?人人都能看得懂的详解来了!

华为云开发者社区

正则表达式 GaussDB

Fast AI人工智能审图平台-建筑图纸设计效率的倍增器

AI AI审图

上天的源码要不要——GitHub 热点速览 v.21.08

HelloGitHub

Python GitHub 开源 Go 语言

“云原生”的应用价值及关键属性解读

浪潮云

工业互联网助力数字中国建设(新论)

浪潮云

工业互联网

Selenium 常用方法与属性、鼠标悬停与 Select 操作

梦想橡皮擦

Python 28天写作 2月春节不断更

诊所数字化:最大的数据资产-患者数字档案内容

boshi

电子病历 数字化医疗 七日更 28天写作

前端面试常考题:JS垃圾回收机制

华为云开发者社区

JavaScript Vue 大前端 js 垃圾回收

解决dyld: Library not loaded icu4c

一个大红包

brew icu4c

(28DW-S8-Day3) 比特币、 区块链是什么?

mtfelix

比特币 区块链 28天写作

这些面试题你会吗?连续四年百度Android岗必问面试题!深度好文

欢喜学安卓

android 程序员 面试 移动开发

透彻解析!在字节跳动我是如何当面试官的,讲的明明白白!

欢喜学安卓

android 程序员 面试 移动开发

【进阶】面试官问我Chrome浏览器的渲染原理(6000字长文)

我是哪吒

学习 程序员 chorme 28天写作 2月春节不断更

go get下载包失败问题

happlyfox

28天写作 2月春节不断更 Go 语言

产品经理训练营第四周总结

产品经理训练营

产业实践推动科技创新,京东科技集团3篇论文入选ICASSP 2021

京东科技开发者

人工智能 机器学习 信号 语音识别

Kafka.05 - 生产者与消费者介绍

insight

kafak 2月春节不断更

Java lambda表达式人类使用指南

ES_her0

28天写作

话题讨论 | 技术人员的职业发展困惑,你也有么?

架构精进之路

职业规划 话题讨论 28天写作 技术人员

基于matlab的控制系统与仿真2-传递函数模型

AXYZdong

matlab 2月春节不断更

透彻解析!如何快速的开发一个完整的直播app,薪资翻倍

欢喜学安卓

android 程序员 面试 移动开发

从磁盘读取成本分析两种 100% 遍历思路:按格子遍历 & 按线遍历

宫水三叶的刷题日记

面试 LeetCode 数据结构与算法

西北大学研发猴脸识别技术,金丝猴可刷脸打卡;IJCAI 2020丨基于学习实例隐空间的文本风格转换

京东科技开发者

人脸识别 IT 量子通讯

LiteOS:盘点那些重要的数据结构

华为云开发者社区

源码 数据结构 LiteOS LOS_DL_LIST Priority Queue

我在极客时间录课的故事(四):学习产生惰性是一种正常现象

李艺

我在极客时间录课的故事

读书笔记-MySQL

crush

MySQL

华为发布业界首款AI-Native数据库,挑动了谁的神经?
_云计算_赵钰莹_InfoQ精选文章