2天时间,聊今年最热的 Agent、上下文工程、AI 产品创新等话题。2025 年最后一场~ 了解详情
写点什么

如何快速打造高稳定千亿级别对象存储平台

  • 2019-08-31
  • 本文字数:525 字

    阅读完需:约 2 分钟

如何快速打造高稳定千亿级别对象存储平台

QCon上海2018大会上,赵健博讲师做了《如何快速打造高稳定千亿级别对象存储平台》主题演讲,主要内容如下。


演讲简介


快手每天都有海量的视频数据上传存储,到目前为止所有的视频以及衍生数据总量更是数量庞大,且视频本身有大有小,如何存储这些数据将是一个颇具挑战性的问题。本次演讲将会介绍一种可以快速构建海量短视频存储的服务的方案、我们在实践中遇到的问题以及解决方案,例如我们是怎么解决高可用、高扩展性、高性能等问题的。

主要内容

  1. 在线短视频存储服务系统的要求;

  2. 在线短视频存储服务系统的架构与实现细节;

  3. 实践中遇到的问题与解决方案;

  4. 未来规划。

听众受益

  1. 掌握如何快速构建一个海量对象存储服务;

  2. 了解到海量分布式存储服务可能会遇到的一些问题,如可用性、扩展性、性能问题,并针对这些问题提供一种解决方案。


讲师介绍


赵健博


快手 高级架构师


赵健博,快手大数据架构团队的负责人,负责快手公司内 Hadoop 生态中存储、调度、计算、AI 架构等子系统内核与周边子系统的研发,与在公司内的应用。先后就职于百度、奇虎 360、58 集团,快手。大数据领域专家,2009 年毕业于中国科学院计算所,主要研究领域包括分布式计算、调度与存储系统等。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-31 17:031472

评论

发布
暂无评论
发现更多内容

分享一次海量数据平滑迁移实战

京东科技开发者

使用 bend-ingest-kafka 将数据流实时导入到 Databend

Databend

软工智库|低代码篇(一)——低代码开发平台发展趋势是什么?

电子标准院软工研究室

常用网络命令 dig 详解及使用示例

不在线第一只蜗牛

网络 dig

ETL数据集成丨使用ETLCloud实现MySQL与Greenplum数据同步

谷云科技RestCloud

MySQL greenplum ETL 数据集成 ETLCloud

如何开始使用基于成果的产品路线图?

ShineScrum

探索 Apache Paimon 在阿里智能引擎的应用场景

Apache Flink

大数据 flink paimon Apache Flink Apache Paimon

软工智库|低代码篇(二)——低代码开发平台内涵是什么?

电子标准院软工研究室

高效存储的秘诀:bitmap 数据结构在标签中的应用

袋鼠云数栈

数据结构 BitMap 标签 用户画像 标签体系

实现经典网络 ECS 实例内网互通的方案

极客天地

万字长文讲透微信小程序的底层架构

landred

微信小程序

一文读懂DNS解析原理、设置步骤、生效时间和常见问题

防火墙后吃泡面

内推失败!

王磊

项目

记录一次使用easypoi时与源码博弈的过程

京东科技开发者

OpenAI 向少部分用户推出 GPT-4o(S2S)模型;Meta 发布 3D Gen AI 模型丨 RTE 开发者日报

RTE开发者社区

要直播啦!KaiwuDB 蓄力时序存储引擎

KaiwuDB

KaiwuDB

MobPush for Uni-app

MobTech袤博科技

开发者,产品动态,java

软件测试学习笔记丨JUnit5动态测试规则

测试人

软件测试

如何快速打造高稳定千亿级别对象存储平台_QCon_赵健博_InfoQ精选文章