写点什么

仇应俊谈阿里云 OTS

  • 2012-11-18
  • 本文字数:643 字

    阅读完需:约 2 分钟

11 月 9 号的阿里云开发者大会上。来自与阿里的仇应俊分享了阿里云 OTS(开放结构化数据服务的技术实践),他首先分享了 OTS 的产生背景:

  1. 用户规模和应用所处理的数据呈现爆炸式增长;
  2. 服务的高可用性要求;
  3. 应用的数据库表结构会随着业务的增长而改变;

随后他又举了一个实例来说明传统数据库的局限:

用户数到达 3500 万的应用,图片记录数达到 10 万,每秒新增 3000 条记录,总数据量近百 TB。在这样的场景下,对于单机数据库,在规模处理时无能为力,最多支撑 1TB。静态表的分区、扩容也容易出现问题。

OTS 采用飞天的内核实现调度与底层通讯,在其上有结构化数据处理的引擎,应对用户的并发请求,并通过简介的 API 来供开发者调用。他指出了 OTS 在处理这些问题时的原则:

  1. 规模可伸缩性;数据会被水平分割成很多分区,自动调配到数据节点进行处理,当原有的数据分区不能满足需求以后自动进行再次的调配;
  2. 高可用性;针对硬件比如交换机之类的故障将会自动被侦测到,失效机器上的数据分区会被转移到其他的节点上;通过热升级的方式保证高可用性;
  3. 自动应对表结构变化。OTS 的数据模型对于属性列没有限制,可以实现动态增加;

数据安全一直都是一个敏感的话题,针对 OTS 的数据,他们目前会在几个层面上做保证:

  1. 数据会统一存储在底层分布式的文件系统,分布式文件系统会保证每个数据有多份的拷贝,当拷贝丢失或者损害的时候,系统会自动检测到会恢复。
  2. 每个数据在 OTS 里面都是隔离的,这样保证用户的数据是本身是安全可靠。

目前阿里的“冰火鸟”以及“云·OS”的用户存储空间都使用的 OTS。

2012-11-18 03:193029
用户头像

发布了 89 篇内容, 共 33.8 次阅读, 收获喜欢 4 次。

关注

评论

发布
暂无评论
发现更多内容

聊聊CWE 4.14 与 ISA/IEC 62443中,如何保障工业软件的安全性

华为云开发者联盟

安全 开发 华为云 华为云开发者联盟 工业软件

跨端轻量JavaScript引擎的实现与探索

京东科技开发者

印度股票盘开发

GangguHK

NineData全方位支持 TDSQL:打造企业级数据库新体验

NineData

tdsql 数据对比 SQL开发 迁移同步 不停机迁移

ChatGPT是什么意思?从产品简介、替代软件到应用场景等全方位解读!

彭宏豪95

人工智能 在线白板 AIGC ChatGPT 效率软件

人工智能的本质是编程+数学吗?

算法的秘密

Libcomm通信库:GaussDB(DWS) 为解决建联过多的小妙招

华为云开发者联盟

数据库 后端 华为云 华为云开发者联盟 华为云GaussDB(DWS)

【教程】oc代码混淆_OC代码混淆工具

虚位以待!OpenHarmony开发者激励计划持续招募中

OpenHarmony开发者

OpenHarmony 开发者激励计划

✅inventory hint,解决热点数据如何高效更新

派大星

:MySQL 数据库 java 编程 热点数据

你知道h.265吧?但关于AV1编码格式你也来了解一下吗?

Geek_ee6d52

arthas火焰图async-profiler在云交易中的运用

京东科技开发者

从keys命令出发-浅谈redis的字典和字典迭代器

京东科技开发者

1688 API接口与ERP系统的集成与应用

Anzexi58

ERP接口 API 文档

re:Invent 产品体验与感受分享:Amazon ElastiCache Serverless 缓存的即时扩展

亚马逊云科技 (Amazon Web Services)

Serverless

两会热议高质量发展 华大北斗用芯领航

江湖老铁

度小满轩辕:金融行业的大模型实战派

脑极体

AI

四种领导风格的大白话理解

芃篙君

管理

仇应俊谈阿里云OTS_服务革新_水羽哲_InfoQ精选文章