华为云对象存储服务 OBS 3.0,重新定义数据连接能力

发布于:2020 年 4 月 7 日 17:18

华为云对象存储服务OBS 3.0,重新定义数据连接能力

近日,在 2018 华为中国区生态伙伴大会——“华为云基础设施服务:稳定极速,为企而生”分论坛期间,华为云发布了其全新一代对象存储服务 OBS 3.0。

云时代存储系统的挑战 从存储到数据的转身

在当天的论坛上,华为云对象存储专家首先通过一个客户案例阐述了万物互联的智能时代,对云存储的述求:数据的全连接,完整数据生态,生命周期管理,以及高扩展、高性能、高可靠等能力,这些都给下一代云存储带来了全面的挑战。

华为云研发了全新一代对象存储服务 OBS 3.0:拥有 10 万 + 节点的扩展能力,单桶千亿对象统一命名空间,轻松应对 EB 级容量需求,并且具有极致的性能与可靠性。

华为云对象存储服务OBS 3.0,重新定义数据连接能力

华为云对象存储首席架构师 解析云时代存储系统的挑战

以云上数据为中心 高性能、高扩展和高可用的全栈数据服务架构

华为云全新的对象存储服务 OBS 3.0 架构全微服务化,在 4 层总体架构内,每个功能都是独立的微服务,每个微服务都可以独立部署和扩展。而受益于多级分区管理技术,让整个系统的扩展性和故障域获得了很好的平衡,满足了公有云系统超高可靠性苛刻要求,并拥有 AZ 级容灾和跨地域容灾能力。

华为透露其对象存储服务已经摒弃 10GE 网络,全面部署 25GE 网络,并且通过独有的 RDMA 网络技术,海思定制硬件 HTTPS 加速技术,Flex EC 技术等,使得接入性能大幅提升,轻松达到单流 300MB/S, 单桶 20000TPS, 小对象延迟 <10ms 等业界最领先性能指标,远远优于友商。

华为云对象存储服务OBS 3.0,重新定义数据连接能力

华为云对象存储服务的优势

基于 SQL 标准的 OBS Select 接口 数据访问超便捷

一直以来,公有云对象存储中数据都是作为整体访问的,如果要分析一个压缩文件数据,需要下载和解压后再对数据进行处理,才能获取到结果。如何更快捷地挖掘数据潜在价值,是当前企业共同面对的问题,华为云已洞察到企业用户面临的这类问题,并且在对象存储服务 OBS 3.0 中实现了 OBS Select 功能,提供 SQL 接口对 OBS 对象做数据分析和计算。

具体来说,华为云该功能有如下优点:

1. 数据即来即用:在 OBS 的接口参数中直接嵌入 SQL 语句,即可分析对象存储内的数据;
2. 语法兼容性强:支持多种 SQL 标准,包括 Spark SQL,标准 SQL 等,用户不用预先定义数据模型,系统自动识别数据内容;
3. 数据扩展性强:支持业界主流的结构化数据 (如 CSV,Parquet,ORC,JSON) 和用户自定义数据格式;
4. 低成本快速访问:对数据进行过滤,相对于直接下载 OBS 数据,极大降低带宽成本,减少数据获取时间。

在论坛现场,华为通过视频演示了在查询违章记录场景下,使用 OBS Select 接口,无需导入数据库,无需数据迁移的情况下,直接对 OBS 桶内的数据进行 SQL 检索和计算,极速返回结果,OBS Select 强大的功能和易用性,引起了参会嘉宾浓厚兴趣。具介绍,该功能更将会近期在华为云对象存储服务上线。

华为云对象存储服务OBS 3.0,重新定义数据连接能力

华为云现场展示其 OBS-SELECT 功能

本文转载自华为云产品与解决方案公众号。

原文链接: https://mp.weixin.qq.com/s/B7K0JDwc_KV3agfd6DXU2g

欲了解 AWS 的更多信息,请访问【AWS 技术专区】

阅读数:193 发布于:2020 年 4 月 7 日 17:18

更多 云计算、语言 & 开发、文化 & 方法 相关课程,可下载【 极客时间 】App 免费领取 >

评论

发布
暂无评论