QCon 演讲火热征集中,快来分享技术实践与洞见! 了解详情
写点什么

如何快速打造高稳定千亿级别对象存储平台

  • 2019-08-31
  • 本文字数:525 字

    阅读完需:约 2 分钟

如何快速打造高稳定千亿级别对象存储平台

QCon上海2018大会上,赵健博讲师做了《如何快速打造高稳定千亿级别对象存储平台》主题演讲,主要内容如下。


演讲简介


快手每天都有海量的视频数据上传存储,到目前为止所有的视频以及衍生数据总量更是数量庞大,且视频本身有大有小,如何存储这些数据将是一个颇具挑战性的问题。本次演讲将会介绍一种可以快速构建海量短视频存储的服务的方案、我们在实践中遇到的问题以及解决方案,例如我们是怎么解决高可用、高扩展性、高性能等问题的。

主要内容

  1. 在线短视频存储服务系统的要求;

  2. 在线短视频存储服务系统的架构与实现细节;

  3. 实践中遇到的问题与解决方案;

  4. 未来规划。

听众受益

  1. 掌握如何快速构建一个海量对象存储服务;

  2. 了解到海量分布式存储服务可能会遇到的一些问题,如可用性、扩展性、性能问题,并针对这些问题提供一种解决方案。


讲师介绍


赵健博


快手 高级架构师


赵健博,快手大数据架构团队的负责人,负责快手公司内 Hadoop 生态中存储、调度、计算、AI 架构等子系统内核与周边子系统的研发,与在公司内的应用。先后就职于百度、奇虎 360、58 集团,快手。大数据领域专家,2009 年毕业于中国科学院计算所,主要研究领域包括分布式计算、调度与存储系统等。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-31 17:031219

评论

发布
暂无评论
发现更多内容

一份vue面试考点清单

bb_xiaxia1998

Vue

一个 SaaS 软件同本地部署 On-Premises 系统集成的实际项目案例分享

汪子熙

微服务 SaaS 系统集成 On-Premises 11月月更

河南数字经济产业创新研究院加入星策社区,携手推进企业智能化转型发展

星策开源社区

人工智能 开源 AI 企业转型 智能化

APP“小动作”不断?HarmonyOS 3隐私中心可视化面板让它无处藏身

Geek_2d6073

高级前端一面常考手写面试题指南

helloworld1024fd

JavaScript

5年匠心之作,云原生安全真经大公开!

青藤云安全

网络安全 青藤云安全 云原生安全

首个中文Stable Diffusion模型开源;TPU演进十年;18个PyTorch性能优化技巧 | AI系统前沿动态

OneFlow

人工智能 开源 深度学历 TPU

python的成员方法的简单介绍

乔乔

11月月更

Flask框架:如何运用Ajax轮询动态绘图

华为云开发者联盟

JavaScript 前端 华为云 企业号十月 PK 榜

ShardingSphere + OpenSergo,共同提升微服务体系下数据库的性能与稳定

SphereEx

数据库 微服务 Apache ShardingSphere

clickhouse在风控-风险洞察领域的探索与实践

京东科技开发者

flink 数据 Clickhouse 风控 风险控制

前端vue多人写作开发技巧-路由配置

千锋IT教育

DTSE Tech Talk | 第10期:云会议带你入门音视频世界

华为云开发者联盟

云计算 后端 华为云 企业号十月 PK 榜

从recat源码角度看setState流程

flyzz177

React

手写现代前端框架diff算法-前端面试进阶

helloworld1024fd

JavaScript

火山引擎DataTester :让字节“跳动”起来的A/B实验平台

字节跳动数据平台

大数据 火山引擎 A/B 测试

说说Vue响应式系统中的Watcher和Dep的关系-面试进阶

bb_xiaxia1998

Vue

为提高 SDLC 安全,GitHub 发布新功能|GitHub Universe 2022

SEAL安全

GitHub 安全

前端手写面试题,看这一篇就够了

helloworld1024fd

JavaScript

深入react源码看setState究竟做了什么?

flyzz177

React

什么是Maven

莪是男神

Java maven 11月月更

学习MySQL必须掌握的13个关键字,你get了吗?

小小怪下士

Java MySQL 程序员

GaiaX开源解读 | 跨端动态化模板引擎详解,看完你也能写一个

阿里巴巴文娱技术

开源 移动开发 移动端开发

FusionInsight MRS Flink DataStream API读写Hudi实践

华为云开发者联盟

大数据 华为云 数据读写 企业号十月 PK 榜

全国信安标委杨建军秘书长一行莅临青藤,调研指导网络安全标准和产业工作

青藤云安全

网络安全 青藤云安全

从源码角度看React-Hydrate原理

flyzz177

React

90 条简单实用的 Python 编程技巧,建议收藏

千锋IT教育

优化开发人员对 K8s 安全的影响

HummerCloud

Kubernetes DevSecOps 11月月更

源码学习之Spring容器创建原理

京东科技开发者

xml spring 源码 容器 测试

手写JavaScript常见5种设计模式

helloworld1024fd

JavaScript

人工智能计算机视觉之OCR(光学字符识别)

XiaoChao_AI

人工智能 CV 计算机视觉 11月月更

如何快速打造高稳定千亿级别对象存储平台_QCon_赵健博_InfoQ精选文章