写点什么

华为云对象存储服务 OBS 3.0,重新定义数据连接能力

  • 2020-04-07
  • 本文字数:1182 字

    阅读完需:约 4 分钟

华为云对象存储服务OBS 3.0,重新定义数据连接能力

近日,在 2018 华为中国区生态伙伴大会——“华为云基础设施服务:稳定极速,为企而生”分论坛期间,华为云发布了其全新一代对象存储服务 OBS 3.0。

云时代存储系统的挑战 从存储到数据的转身

在当天的论坛上,华为云对象存储专家首先通过一个客户案例阐述了万物互联的智能时代,对云存储的述求:数据的全连接,完整数据生态,生命周期管理,以及高扩展、高性能、高可靠等能力,这些都给下一代云存储带来了全面的挑战。


华为云研发了全新一代对象存储服务 OBS 3.0:拥有 10 万+节点的扩展能力,单桶千亿对象统一命名空间,轻松应对 EB 级容量需求,并且具有极致的性能与可靠性。



华为云对象存储首席架构师 解析云时代存储系统的挑战

以云上数据为中心 高性能、高扩展和高可用的全栈数据服务架构

华为云全新的对象存储服务 OBS 3.0 架构全微服务化,在 4 层总体架构内,每个功能都是独立的微服务,每个微服务都可以独立部署和扩展。而受益于多级分区管理技术,让整个系统的扩展性和故障域获得了很好的平衡,满足了公有云系统超高可靠性苛刻要求,并拥有 AZ 级容灾和跨地域容灾能力。


华为透露其对象存储服务已经摒弃 10GE 网络,全面部署 25GE 网络,并且通过独有的 RDMA 网络技术,海思定制硬件 HTTPS 加速技术,Flex EC 技术等,使得接入性能大幅提升,轻松达到单流 300MB/S,单桶 20000TPS,小对象延迟<10ms 等业界最领先性能指标,远远优于友商。



华为云对象存储服务的优势

基于 SQL 标准的 OBS Select 接口 数据访问超便捷

一直以来,公有云对象存储中数据都是作为整体访问的,如果要分析一个压缩文件数据,需要下载和解压后再对数据进行处理,才能获取到结果。如何更快捷地挖掘数据潜在价值,是当前企业共同面对的问题,华为云已洞察到企业用户面临的这类问题,并且在对象存储服务 OBS 3.0 中实现了 OBS Select 功能,提供 SQL 接口对 OBS 对象做数据分析和计算。


具体来说,华为云该功能有如下优点:


1.数据即来即用:在 OBS 的接口参数中直接嵌入 SQL 语句,即可分析对象存储内的数据;


2.语法兼容性强:支持多种 SQL 标准,包括 Spark SQL,标准 SQL 等,用户不用预先定义数据模型,系统自动识别数据内容;


3.数据扩展性强:支持业界主流的结构化数据(如 CSV,Parquet,ORC,JSON)和用户自定义数据格式;


4.低成本快速访问:对数据进行过滤,相对于直接下载 OBS 数据,极大降低带宽成本,减少数据获取时间。


在论坛现场,华为通过视频演示了在查询违章记录场景下,使用 OBS Select 接口,无需导入数据库,无需数据迁移的情况下,直接对 OBS 桶内的数据进行 SQL 检索和计算,极速返回结果,OBS Select 强大的功能和易用性,引起了参会嘉宾浓厚兴趣。具介绍,该功能更将会近期在华为云对象存储服务上线。



华为云现场展示其 OBS-SELECT 功能


本文转载自华为云产品与解决方案公众号。


原文链接:https://mp.weixin.qq.com/s/B7K0JDwc_KV3agfd6DXU2g


2020-04-07 17:181734

评论

发布
暂无评论
发现更多内容

火山引擎DataLeap的Data Catalog系统公有云实践 (上)

字节跳动数据平台

大数据 数据中台 数据治理 数据安全 企业号 7 月 PK 榜

广东省《5A物理抗菌纺织品》团体标准颁布

极客天地

KaiwuDB 资深解决方案专家周幸骏:打造核心时序引擎,释放数据新价值

KaiwuDB

时序数据 KaiwuDB

免费SAFe大规模敏捷管理工具

顿顿顿

Scrum #敏捷开发 敏捷开发管理工具 SAFe框架

中文人物关系知识图谱(含码源):中文人物关系图谱构建、数据回标、基于远程监督人物关系抽取、知识问答等应用.

汀丶人工智能

人工智能 nlp 知识图谱 智能问答

超强阵容!HarmonyOS极客马拉松2023专家评审团来袭!

HarmonyOS开发者

HarmonyOS

源码解析Collections.sort ——从一个逃过单测的 bug 说起 | 京东云技术团队

京东科技开发者

排序算法 源码解读 企业号 7 月 PK 榜 Collections.sort

浅聊一下大模型

鲸品堂

大模型训练 大模型

2023开源数据库排行榜发布,“新晋黑马”瀚高IvorySQL跻身三十强

极客天地

万字长文浅析配置对MySQL服务器的影响 | 京东物流技术团队

京东科技开发者

MySQL 数据库 服务器 企业号 7 月 PK 榜 MySQL服务器

内部Java内存模型与硬件层面内存模型的关系是什么?

java易二三

Java 编程 程序员 硬件 计算机

基于因果关系知识库的因果事件图谱构建

汀丶人工智能

人工智能 自然语言处理 知识图谱

数据库集群方案详解

KaiwuDB

KaiwuDB 数据库集群技术

自主AI代理:未来的生产力引擎

互联网工科生

人工智能 AI代理

Java基础之IO流

java易二三

Java 编程 程序员 io 计算机

REST API 版本控制:高效管理

Apifox

程序员 RESTful API REST API API 测试

飞桨大模型分布式训练技术

Baidu AICLOUD

飞桨 百度百舸 AI 大底座

Coral Finance 将为 Zepoch 节点空投,Nautilus生态空投季开启

西柚子

Sugar BI:大模型时代的智能 BI

Baidu AICLOUD

BI 数据智能

科研类项目核算的“法、术、器”(二)

用友BIP

项目管理 科研项目

从分片传输到并行传输之大文件传输加速技术

镭速

大文件传输

支付宝小程序云李铮:科技赋能,敏捷增长

TRaaS

支付宝小程序 小程序云开放 蚂蚁

一种配置化的数据脱敏与反脱敏框架实现 | 京东云技术团队

京东科技开发者

数据安全 脱敏 数据脱敏 企业号 7 月 PK 榜

明晚直播:可重构计算芯片的AI创新应用分享!

飞桨PaddlePaddle

人工智能 百度 paddle 飞桨 百度飞桨

618技术揭秘 - 大促弹窗搭投实践 | 京东云技术团队

京东科技开发者

前端 弹窗 xview 企业号 7 月 PK 榜

高性能、高扩展、高稳定:解读 EasyMR 大数据组件自定义可扩展能力

袋鼠云数栈

大数据 大数据组件

详解!视频直播源码布谷科技平台搭建开发:录制功能

山东布谷科技

软件开发 视频直播 源码搭建 短视频直播源码 视频录制

揭秘ChaosBlade CPU故障:实现CPU故障的黑科技

柠檬汁Code(binbin0325)

源码分析 cpu 混沌工程 ChaosBlade 故障模拟

华为云对象存储服务OBS 3.0,重新定义数据连接能力_服务革新_华为云产品与解决方案_InfoQ精选文章