阿里、蚂蚁、晟腾、中科加禾精彩分享 AI 基础设施洞见,现购票可享受 9 折优惠 |AICon 了解详情
写点什么

京东如何基于容器打造高性能及效率的大数据平台

  • 2019-08-17
  • 本文字数:632 字

    阅读完需:约 2 分钟

京东如何基于容器打造高性能及效率的大数据平台

QCon北京2018大会上,范振、陈韦廷讲师做了《京东如何基于容器打造高性能及效率的大数据平台》主题演讲,主要内容如下。


演讲简介


容器化后已经成为云端平台的技术趋势,但其性能表现常常是人们却步或怀疑的。这个主题,我们将介绍京东如何透过 Docker 及 Kubernetes 为基底,打造完整且高性能高效率的大数据平台服务。我们将从多个不同的面向让听众深入了解大数据的应用在容器化后对性能和整体服务所带来的影响:从基础的硬件测试包括 fio,iperf 等等,到真实的应用场景测试如 Spark Streaming or Machine Learning 的工作,再到容器化后资源的利用率和效率所带来的影响。

听众受益

  1. 如何基于容器打造高性能高效率的大数据平台;

  2. 透过 fio,iperf…等等简单的测试工具得到平台的基础性能报告及比较;

  3. 真实大数据工作量(包括 Streaming 和机器学习)的比较结果;

  4. 高性能基础设施的打造经验分享。


讲师介绍


范振


京东 软件开发工程师


范振是服务于京东 AI 与大数据部的软件开发工程师。2014 年加入京东,从事基础平台架构、开发工作;反比价项目、机器学习平台项目的负责人;在高性能服务器、大数据领域有着丰富的经验和视野。


陈韦廷


Intel 资深软件工程师


陈韦廷是一名英特尔资深软件工程师。他致力于大数据及云计算相关领域的解决方案达 6 年以上的时间。他的主要工作为大数据在云计算解决方案的研发,效能调优及客户的支持。目前主要专注于大数据在 Docker 及 Container 技术的研究与发展。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/beijing/schedule


2019-08-17 00:005348

评论

发布
暂无评论
发现更多内容

kubernetes

急需上岸的小谢

10月月更

SpringBoot的实体类中常用的注解

Java学术趴

10月月更

深入理解 Go 语言的一等函数及其应用

宇宙之一粟

函数 Go 语言 10月月更 匿名函数

cstdio的源码学习分析10-格式化输入输出函数fprintf---宏定义/辅助函数分析04

桑榆

源码刨析 10月月更 C++

当前Serverless的六大局限性

阿泽🧸

Serverless 10月月更

微信朋友圈的高性能复杂度分析

Louis

MAC地址与IP地址

急需上岸的小谢

10月月更

微信朋友圈架构高性能复杂度分析

π

#架构实战营 架构实战训练营9期

TCP 复位攻击原理和实战复现

急需上岸的小谢

10月月更

TLS加密远程连接Docker

程序员欣宸

Docker 容器安全 10月月更

挑战30天学完Python:Day5 数据类型 - 列表list

MegaQi

Python 挑战30天学完Python 10月月更

跟着卷卷龙一起学Camera--延迟02

卷卷龙

ISP camera 10月月更

跟着卷卷龙一起学Camera--延迟03

卷卷龙

ISP camera 10月月更

CorelDRAW 2019 软件应用项目(三)

张立梵

设计师 CorelDRAW 2022 10月月更

Java编程之方法重写

魏铁锤

后端 java 编程 10月月更

低代码探索:freemarker的模板和表达式

程序员架构进阶

低代码平台 模板引擎 10月月更 freemarker

Web3.0杂谈-#006(53/100)

hackstoic

DAO Web3.0

架构--作业2

李某人

架构实战营

基于 HDP 构建企业数据平台

Bright

大数据 数据开发 数据平台

Java多线程 线程池Executor框架

Yeats_Liao

后端 Java core 10月月更

2022-10-16:以下go语言代码输出什么?A:timed out;B:panic;C:没有任何输出。 package main import ( “context“ “fmt“

福大大架构师每日一题

golang 福大大 选择题

架构实战训练营模块 2 作业

atcgnu

Java多线程 Callable和Future

Yeats_Liao

后端 Java core 10月月更

SpringBoot实体类常用注解(二)

Java学术趴

10月月更

渲染农场是什么_云渲染农场优缺点有哪些?

Renderbus瑞云渲染农场

云渲染 云渲染农场 渲染农场 Renderbus瑞云渲染

Java核心之多态

魏铁锤

java 编程 10月月更

Java多线程 Future和FutureTask的区别

Yeats_Liao

后端 Java core 10月月更

【ArchSummit】平安金融壹账通核心系统的微服务设计经验分享

小明Java问道之路

Java 架构 全球架构师峰会 ArchSummit 10月月更

微信朋友圈的高性能复杂度分析

乖乖IvyShine

02微信高能性复杂度分析

神奇的叶叔叔

跟着卷卷龙一起学Camera--延迟01

卷卷龙

ISP camera 10月月更

京东如何基于容器打造高性能及效率的大数据平台_QCon_陈韦廷_InfoQ精选文章