京东如何基于容器打造高性能及效率的大数据平台

阅读数:4531 2019 年 8 月 17 日 00:00

京东如何基于容器打造高性能及效率的大数据平台

QCon 北京 2018 大会上,范振、陈韦廷讲师做了《京东如何基于容器打造高性能及效率的大数据平台》主题演讲,主要内容如下。

演讲简介

容器化后已经成为云端平台的技术趋势,但其性能表现常常是人们却步或怀疑的。这个主题,我们将介绍京东如何透过 Docker 及 Kubernetes 为基底,打造完整且高性能高效率的大数据平台服务。我们将从多个不同的面向让听众深入了解大数据的应用在容器化后对性能和整体服务所带来的影响:从基础的硬件测试包括 fio,iperf 等等,到真实的应用场景测试如 Spark Streaming or Machine Learning 的工作,再到容器化后资源的利用率和效率所带来的影响。

听众受益

  1. 如何基于容器打造高性能高效率的大数据平台;
  2. 透过 fio,iperf…等等简单的测试工具得到平台的基础性能报告及比较;
  3. 真实大数据工作量(包括 Streaming 和机器学习)的比较结果;
  4. 高性能基础设施的打造经验分享。

讲师介绍

范振

京东 软件开发工程师

范振是服务于京东 AI 与大数据部的软件开发工程师。2014 年加入京东,从事基础平台架构、开发工作;反比价项目、机器学习平台项目的负责人;在高性能服务器、大数据领域有着丰富的经验和视野。

陈韦廷

Intel 资深软件工程师

陈韦廷是一名英特尔资深软件工程师。他致力于大数据及云计算相关领域的解决方案达 6 年以上的时间。他的主要工作为大数据在云计算解决方案的研发,效能调优及客户的支持。目前主要专注于大数据在 Docker 及 Container 技术的研究与发展。

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

京东如何基于容器打造高性能及效率的大数据平台

完整演讲 PPT 下载链接

https://qcon.infoq.cn/2018/beijing/schedule

评论

发布