写点什么

仇应俊谈阿里云 OTS

  • 2012-11-18
  • 本文字数:643 字

    阅读完需:约 2 分钟

11 月 9 号的阿里云开发者大会上。来自与阿里的仇应俊分享了阿里云 OTS(开放结构化数据服务的技术实践),他首先分享了 OTS 的产生背景:

  1. 用户规模和应用所处理的数据呈现爆炸式增长;
  2. 服务的高可用性要求;
  3. 应用的数据库表结构会随着业务的增长而改变;

随后他又举了一个实例来说明传统数据库的局限:

用户数到达 3500 万的应用,图片记录数达到 10 万,每秒新增 3000 条记录,总数据量近百 TB。在这样的场景下,对于单机数据库,在规模处理时无能为力,最多支撑 1TB。静态表的分区、扩容也容易出现问题。

OTS 采用飞天的内核实现调度与底层通讯,在其上有结构化数据处理的引擎,应对用户的并发请求,并通过简介的 API 来供开发者调用。他指出了 OTS 在处理这些问题时的原则:

  1. 规模可伸缩性;数据会被水平分割成很多分区,自动调配到数据节点进行处理,当原有的数据分区不能满足需求以后自动进行再次的调配;
  2. 高可用性;针对硬件比如交换机之类的故障将会自动被侦测到,失效机器上的数据分区会被转移到其他的节点上;通过热升级的方式保证高可用性;
  3. 自动应对表结构变化。OTS 的数据模型对于属性列没有限制,可以实现动态增加;

数据安全一直都是一个敏感的话题,针对 OTS 的数据,他们目前会在几个层面上做保证:

  1. 数据会统一存储在底层分布式的文件系统,分布式文件系统会保证每个数据有多份的拷贝,当拷贝丢失或者损害的时候,系统会自动检测到会恢复。
  2. 每个数据在 OTS 里面都是隔离的,这样保证用户的数据是本身是安全可靠。

目前阿里的“冰火鸟”以及“云·OS”的用户存储空间都使用的 OTS。

2012-11-18 03:193223
用户头像

发布了 89 篇内容, 共 35.2 次阅读, 收获喜欢 4 次。

关注

评论

发布
暂无评论
发现更多内容

使用 Higress AI 插件对接通义千问大语言模型

Se7en

腾讯秋招面试,人麻了。。。

王中阳Go

腾讯 面试 面经 大厂面试 秋招

在爬取京东商品详情信息时,如何处理验证码问题?

tbapi

京东商品详情数据接口 京东API

AI Native平台,跨越AI应用从创新到生产的鸿沟

阿里云大数据AI技术

人工智能 阿里云 云栖大会

adobe AU2024系统要求 附Audition 2024中文破解版安装包 Mac/win

Rose

抖音商品sku数据接口(Dy.item_sku)丨抖音平台API数据接口指南

tbapi

抖音商品详情数据接口 抖音API接口 抖音商品sku接口

互动LED地砖屏的独特性

Dylan

科技 LED display LED显示屏 led显示屏厂家

AIGC云平台解决方案如何重塑电商设计流程

3DCAT实时渲染

AIGC云平台 AIGC解决方案 AIGC创作云平台

懒人一键安装:pd虚拟机专用windows系统镜像(m1/intel)

你的猪会飞吗

Mac软件下载站 mac破解软件下载

告别音频瑕疵,迎接完美音质——iZotope RX 11,音频工程师的必备神器

Rose

大模型时代下的新一代广告系统

京东零售技术

人工智能 算法 大模型

【第4期】搜索客 Meetup | INFINI Pizza 网站 SVG 动画这么炫,我教你啊!

极限实验室

SVG ChatGPT 极限科技 Pizza 搜索客社区

淘宝商品详情API接口:电商营销的坚实基石

代码忍者

API 测试 pinduoduo API

2024开放原子开源生态大会将启,深开鸿与您一起共促生态繁荣

科技热闻

苹果电脑几款好用的效率翻倍工具,轻松管理剪贴板!

Rose

一位架构师的自述:在尚未踏入的世界成为你自己

京东零售技术

架构 代码人生 技术成长

mac触控板增强神器 BetterTouchTool for Mac破解及安装教程

Rose

扬帆云栖,英特尔携手阿里云共缔数智精彩

E科讯

云起无垠荣获第九届“创客中国”网络安全专题赛二等奖

云起无垠

鸿蒙保障应用开发安全的技术措施

芯盾时代

鸿蒙 嵌入式

邮储银行,奔跑在智能化软件开发的春天里

脑极体

AI

JetBrains pycharm pro 2024最新永久激活码 pycharm2024下载安装

Rose

支持M1的Photoshop 2021 for mac中文直装版安装包分享

Rose

GreatSQL 中为什么 Update 不会被锁等待

GreatSQL

对HttpServletRequest中的Header进行增删

派大星

HttpServletRequest

仇应俊谈阿里云OTS_服务革新_水羽哲_InfoQ精选文章