写点什么

仇应俊谈阿里云 OTS

  • 2012-11-18
  • 本文字数:643 字

    阅读完需:约 2 分钟

11 月 9 号的阿里云开发者大会上。来自与阿里的仇应俊分享了阿里云 OTS(开放结构化数据服务的技术实践),他首先分享了 OTS 的产生背景:

  1. 用户规模和应用所处理的数据呈现爆炸式增长;
  2. 服务的高可用性要求;
  3. 应用的数据库表结构会随着业务的增长而改变;

随后他又举了一个实例来说明传统数据库的局限:

用户数到达 3500 万的应用,图片记录数达到 10 万,每秒新增 3000 条记录,总数据量近百 TB。在这样的场景下,对于单机数据库,在规模处理时无能为力,最多支撑 1TB。静态表的分区、扩容也容易出现问题。

OTS 采用飞天的内核实现调度与底层通讯,在其上有结构化数据处理的引擎,应对用户的并发请求,并通过简介的 API 来供开发者调用。他指出了 OTS 在处理这些问题时的原则:

  1. 规模可伸缩性;数据会被水平分割成很多分区,自动调配到数据节点进行处理,当原有的数据分区不能满足需求以后自动进行再次的调配;
  2. 高可用性;针对硬件比如交换机之类的故障将会自动被侦测到,失效机器上的数据分区会被转移到其他的节点上;通过热升级的方式保证高可用性;
  3. 自动应对表结构变化。OTS 的数据模型对于属性列没有限制,可以实现动态增加;

数据安全一直都是一个敏感的话题,针对 OTS 的数据,他们目前会在几个层面上做保证:

  1. 数据会统一存储在底层分布式的文件系统,分布式文件系统会保证每个数据有多份的拷贝,当拷贝丢失或者损害的时候,系统会自动检测到会恢复。
  2. 每个数据在 OTS 里面都是隔离的,这样保证用户的数据是本身是安全可靠。

目前阿里的“冰火鸟”以及“云·OS”的用户存储空间都使用的 OTS。

2012-11-18 03:193366
用户头像

发布了 89 篇内容, 共 36.4 次阅读, 收获喜欢 4 次。

关注

评论

发布
暂无评论
发现更多内容

【YashanDB知识库】JDBC驱动的date类型字段结果集调用getString方法只返回日期,不返回时分秒

YashanDB

数据库 yashandb

【YashanDB知识库】Mybatis-Plus调用YashanDB怎么设置分页

YashanDB

数据库 yashandb

这份4577页的Java面试PDF,让我成功斩获阿里、字节等大厂offer

Summer

Java 程序员 面试 架构师 大厂

阿里领导给的Java八股文,包括15条技术线,已助1900人进入大厂!

Summer

Java 程序员 面试 架构师 大厂

=基于 Flexus 云服务器 X 实例体验大模型部署体验测评

轶天下事

Flexus X实例搭配华为云EulerOS,快速部署MySQL并执行读写性能测试

轶天下事

Easysearch Java SDK 2.0.x 使用指南(二)

极限实验室

sdk client easysearch

分布式系统架构:限流设计模式

不在线第一只蜗牛

Java 架构 分布式 设计模式

云起无垠荣获第八届“强网杯”高阶技术专项赛优秀奖

云起无垠

年底了,如何与领导谈绩效

老张

绩效考核 工作汇报

阿里P8架构师都要学习研究的java加强版23种设计模式神级PDF文档

程序员高级码农

Java 程序员 设计模式 java面试 Java面试题

干掉EasyExcel!FastExcel初体验

王磊

终于拿到了阿里P8架构师分享的JCF和JUC源码分析与实现笔记java岗

程序员高级码农

Java 编程 程序员 java面试 Java面试题

《计算机组成及汇编语言原理》阅读笔记:p48-p81

codists

计算机组成及汇编语言原理

基于Flexus云服务器X实例的数据库性能测试

轶天下事

【YashanDB知识库】单机部署报错:prohibited operation, please check if the IP and username are correct

YashanDB

数据库 yashandb

【教程】第十章:任务仪表盘(2) —— 各有千秋

NocoBase

开源 项目管理 低代码 任务管理 无代码

BOE(京东方)亮相世界显示产业创新发展大会 以创新科技全面引领行业风向标

爱极客侠

OpenAI 推出嵌入式硬件 SDK,支持 ESP32 语音开发;INFP:音频驱动的双人对话头像生成,自动区分说话者和倾听者

RTE开发者社区

为什么生成式AI的工作被称为“推理”而不是“预测”?

JustYan

人工智能 AI大模型 生成式AI

【YashanDB知识库】jdbc查询st_geometry类型的数据时抛出YAS-00101 cannot allocate 0 bytes for anlHeapMalloc异常

YashanDB

数据库 yashandb

【YashanDB知识库】Mybatis-Plus调用YashanDB怎么设置分页

YashanDB

数据库 yashandb

时代邻里携手华为云TaurusDB,打造智慧社区服务行业创新标杆

YG科技

Flexus X实例ultralytics模型yolov10深度学习AI部署与应用

轶天下事

仇应俊谈阿里云OTS_服务革新_水羽哲_InfoQ精选文章