【ArchSummit架构师峰会】探讨数据与人工智能相互驱动的关系>>> 了解详情
写点什么

华为云对象存储服务 OBS 3.0,重新定义数据连接能力

  • 2020-04-07
  • 本文字数:1182 字

    阅读完需:约 4 分钟

华为云对象存储服务OBS 3.0,重新定义数据连接能力

近日,在 2018 华为中国区生态伙伴大会——“华为云基础设施服务:稳定极速,为企而生”分论坛期间,华为云发布了其全新一代对象存储服务 OBS 3.0。

云时代存储系统的挑战 从存储到数据的转身

在当天的论坛上,华为云对象存储专家首先通过一个客户案例阐述了万物互联的智能时代,对云存储的述求:数据的全连接,完整数据生态,生命周期管理,以及高扩展、高性能、高可靠等能力,这些都给下一代云存储带来了全面的挑战。


华为云研发了全新一代对象存储服务 OBS 3.0:拥有 10 万+节点的扩展能力,单桶千亿对象统一命名空间,轻松应对 EB 级容量需求,并且具有极致的性能与可靠性。



华为云对象存储首席架构师 解析云时代存储系统的挑战

以云上数据为中心 高性能、高扩展和高可用的全栈数据服务架构

华为云全新的对象存储服务 OBS 3.0 架构全微服务化,在 4 层总体架构内,每个功能都是独立的微服务,每个微服务都可以独立部署和扩展。而受益于多级分区管理技术,让整个系统的扩展性和故障域获得了很好的平衡,满足了公有云系统超高可靠性苛刻要求,并拥有 AZ 级容灾和跨地域容灾能力。


华为透露其对象存储服务已经摒弃 10GE 网络,全面部署 25GE 网络,并且通过独有的 RDMA 网络技术,海思定制硬件 HTTPS 加速技术,Flex EC 技术等,使得接入性能大幅提升,轻松达到单流 300MB/S,单桶 20000TPS,小对象延迟<10ms 等业界最领先性能指标,远远优于友商。



华为云对象存储服务的优势

基于 SQL 标准的 OBS Select 接口 数据访问超便捷

一直以来,公有云对象存储中数据都是作为整体访问的,如果要分析一个压缩文件数据,需要下载和解压后再对数据进行处理,才能获取到结果。如何更快捷地挖掘数据潜在价值,是当前企业共同面对的问题,华为云已洞察到企业用户面临的这类问题,并且在对象存储服务 OBS 3.0 中实现了 OBS Select 功能,提供 SQL 接口对 OBS 对象做数据分析和计算。


具体来说,华为云该功能有如下优点:


1.数据即来即用:在 OBS 的接口参数中直接嵌入 SQL 语句,即可分析对象存储内的数据;


2.语法兼容性强:支持多种 SQL 标准,包括 Spark SQL,标准 SQL 等,用户不用预先定义数据模型,系统自动识别数据内容;


3.数据扩展性强:支持业界主流的结构化数据(如 CSV,Parquet,ORC,JSON)和用户自定义数据格式;


4.低成本快速访问:对数据进行过滤,相对于直接下载 OBS 数据,极大降低带宽成本,减少数据获取时间。


在论坛现场,华为通过视频演示了在查询违章记录场景下,使用 OBS Select 接口,无需导入数据库,无需数据迁移的情况下,直接对 OBS 桶内的数据进行 SQL 检索和计算,极速返回结果,OBS Select 强大的功能和易用性,引起了参会嘉宾浓厚兴趣。具介绍,该功能更将会近期在华为云对象存储服务上线。



华为云现场展示其 OBS-SELECT 功能


本文转载自华为云产品与解决方案公众号。


原文链接:https://mp.weixin.qq.com/s/B7K0JDwc_KV3agfd6DXU2g


2020-04-07 17:181135

评论

发布
暂无评论
发现更多内容

奇葩的 Git 签名错误

HoneyMoose

C++编译器和链接器的完全指南

小万哥

c++ 程序员 面试 后端 开发

系列课程:从零开始接触人工智能大模型(介绍)

茶桁

使用Spring Boot接入ChatGPT

Java你猿哥

Java spring Spring Boot ssm ChatGPT

文心一言 VS chatgpt (16)-- 算法导论4.1 1~2题

福大大架构师每日一题

ChatGPT 文心一言

失业浪潮之下,不如一蓑烟雨任平生 | 社区征文

宇宙之一粟

比起失业我更害怕自己“一无是处”|社区征文

轻口味

个人成长 移动端 三周年征文

23年最新Java岗常见面试题及答案(1000道),90% 的公司都会问到

Java你猿哥

Java MySQL zookeeper JVM java面试

程序员晋升指南!13年顶级架构设计经验的锦囊妙计与实践分享

Java你猿哥

Java 架构 ssm 架构设计 架构师

从 ChatGPT 大热看未来的云计算的发展趋势 | 社区征文

宇宙之一粟

ChatGPT 三周年征文

深入探秘OpenTelemetry Agent奇特的muzzle机制

骑牛上青山

Java Java Agent OpenTelemetry

一篇文章教你在业务开发中高效玩转TDD(测试驱动开发)

Java你猿哥

Java ssm TDD

Java补充之MySQL入门必备知识

timerring

Java

如何优化Golang中重复的错误处理

乌龟哥哥

三周年连更

【RabbitMQ】| 带你 (超详细) 从0到1使用SpringBoot操作RabbitMQ

Java你猿哥

Java spring Spring Boot ssm RabbitMQ

2023最新后端中大厂面经&在面试过程中如何反问?

Java你猿哥

Java ssm java面试 面试官 Java面经

创意世界在 Photoshop 上运行~

真大的脸盆

Mac ps Mac 软件 Photoshop 2022下载

必知必会的JavaScript前端面试题篇(二),不看后悔!

控心つcrazy

毫不夸张的说,这份SpringBoot学习指南能解决你遇到的98%的问题

做梦都在改BUG

Java spring Spring Boot 框架

2023-05-12:存在一个由 n 个节点组成的无向连通图,图中的节点按从 0 到 n - 1 编号, 给你一个数组 graph 表示这个图, 其中,graph[i] 是一个列表,由所有与节点 i

福大大架构师每日一题

Go 算法 rust

Django笔记二十六之数据库函数之数学公式函数

Hunter熊

Python 数据库 django 公式函数

Kubernetes CNI之Flannel网络模型分析

王玉川

Kubernetes 云原生 flannel VXLAN cni

MySQL 安装配置

二哈侠

MySQL shell脚本 三周年连更

逆袭!阿里专家手码23版Java面试三件套,Github星标直线狂飙

Java你猿哥

Java 微服务 面经 算法题 java核心知识点

Go语言中如何通过接口来实现单一职责原则

Jack

单调栈模板总结及应用

timerring

算法

一文讲明白路由器的基本概念、工作原理、主要部件以及应用场景

wljslmz

路由器 三周年连更

利用 Amazon API Gateway 和 Amazon Lambda 处理 Cloudfront 的内容请求

亚马逊云科技 (Amazon Web Services)

Github标星90K!不愧是阿里大牛珍藏的LeetCode题解全彩小册

Java你猿哥

面试 算法 LeetCode ssm 算法题

BitKeep逆势崛起:千万用户的信任,终点还未到来

鳄鱼视界

如何通过Logstash将MySQL数据同步到ElasticSearch

北桥苏

php MySQL elasticsearch Logstash

华为云对象存储服务OBS 3.0,重新定义数据连接能力_服务革新_华为云产品与解决方案_InfoQ精选文章