写点什么

如何快速打造高稳定千亿级别对象存储平台

  • 2019-08-31
  • 本文字数:525 字

    阅读完需:约 2 分钟

如何快速打造高稳定千亿级别对象存储平台

QCon上海2018大会上,赵健博讲师做了《如何快速打造高稳定千亿级别对象存储平台》主题演讲,主要内容如下。


演讲简介


快手每天都有海量的视频数据上传存储,到目前为止所有的视频以及衍生数据总量更是数量庞大,且视频本身有大有小,如何存储这些数据将是一个颇具挑战性的问题。本次演讲将会介绍一种可以快速构建海量短视频存储的服务的方案、我们在实践中遇到的问题以及解决方案,例如我们是怎么解决高可用、高扩展性、高性能等问题的。

主要内容

  1. 在线短视频存储服务系统的要求;

  2. 在线短视频存储服务系统的架构与实现细节;

  3. 实践中遇到的问题与解决方案;

  4. 未来规划。

听众受益

  1. 掌握如何快速构建一个海量对象存储服务;

  2. 了解到海量分布式存储服务可能会遇到的一些问题,如可用性、扩展性、性能问题,并针对这些问题提供一种解决方案。


讲师介绍


赵健博


快手 高级架构师


赵健博,快手大数据架构团队的负责人,负责快手公司内 Hadoop 生态中存储、调度、计算、AI 架构等子系统内核与周边子系统的研发,与在公司内的应用。先后就职于百度、奇虎 360、58 集团,快手。大数据领域专家,2009 年毕业于中国科学院计算所,主要研究领域包括分布式计算、调度与存储系统等。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-31 17:031399

评论

发布
暂无评论
发现更多内容

唯品会商品数据采集丨唯品会商品详情数据接口(VIP.item_get)

tbapi

唯品会商品详情数据接口 唯品会 唯品会商品数据采集

5M1E,软件质量管理最佳解决方案

敏捷开发

项目管理 敏捷 精益 产品质量管理 5M1E

TDengine 助力中电启明星处理高复杂性和大数据量时序数据

TDengine

数据库 tdengine 时序数据库

速卖通平台数据采集丨速卖通商品详情数据接口(aliexpress.item_get)

tbapi

速卖通商品详情数据接口 速卖通API接口 速卖通

闲鱼商品详情数据接口(goodfish.item_get)

tbapi

闲鱼 闲鱼API 闲鱼商品详情数据接口

极限编程 | 合格的系统隐喻实践是什么样的?

敏捷开发

编程 敏捷开发 软件开发 Bob大叔 极限编程

每秒50万行——MySQL写入压测并发实践

FunTester

Linux 软件安装与卸载

左诗右码

Linux

苏宁商品数据采集丨苏宁商品详情数据接口(suning.item_get)

tbapi

苏宁 苏宁API接口 苏宁商品数据采集 苏宁商品详情数据接口

软件测试学习笔记丨Junit5参数化用例

测试人

软件测试 JUnit

curl 使用:命令行中的 HTTP 客户端

左诗右码

Linux

如何解决Oracle数据表入库中文乱码问题

伤感汤姆布利柏

hexo 实战:(三)独立博客运营总结

北桥苏

Hexo 独立博客搭建

精准掌握唯品会商品详情API:电商数据分析的秘钥

Noah

人工智能 | 大模型之提示词工程:少样本提示

测吧(北京)科技有限公司

测试

Claude3对比GPT4有哪些优点?

蓉蓉

GPT-4 Claude

大型国民老牌药品医疗企业如何借助实时数仓冲破数据孤岛桎梏,拥抱数据驱动的经营管理模式

tapdata

数据孤岛解决方案 多源异构数据融合 doris实时数仓

如何快速打造高稳定千亿级别对象存储平台_QCon_赵健博_InfoQ精选文章