NVIDIA 初创加速计划,免费加速您的创业启动 了解详情
写点什么

京东如何基于容器打造高性能及效率的大数据平台

  • 2019-08-17
  • 本文字数:632 字

    阅读完需:约 2 分钟

京东如何基于容器打造高性能及效率的大数据平台

QCon北京2018大会上,范振、陈韦廷讲师做了《京东如何基于容器打造高性能及效率的大数据平台》主题演讲,主要内容如下。


演讲简介


容器化后已经成为云端平台的技术趋势,但其性能表现常常是人们却步或怀疑的。这个主题,我们将介绍京东如何透过 Docker 及 Kubernetes 为基底,打造完整且高性能高效率的大数据平台服务。我们将从多个不同的面向让听众深入了解大数据的应用在容器化后对性能和整体服务所带来的影响:从基础的硬件测试包括 fio,iperf 等等,到真实的应用场景测试如 Spark Streaming or Machine Learning 的工作,再到容器化后资源的利用率和效率所带来的影响。

听众受益

  1. 如何基于容器打造高性能高效率的大数据平台;

  2. 透过 fio,iperf…等等简单的测试工具得到平台的基础性能报告及比较;

  3. 真实大数据工作量(包括 Streaming 和机器学习)的比较结果;

  4. 高性能基础设施的打造经验分享。


讲师介绍


范振


京东 软件开发工程师


范振是服务于京东 AI 与大数据部的软件开发工程师。2014 年加入京东,从事基础平台架构、开发工作;反比价项目、机器学习平台项目的负责人;在高性能服务器、大数据领域有着丰富的经验和视野。


陈韦廷


Intel 资深软件工程师


陈韦廷是一名英特尔资深软件工程师。他致力于大数据及云计算相关领域的解决方案达 6 年以上的时间。他的主要工作为大数据在云计算解决方案的研发,效能调优及客户的支持。目前主要专注于大数据在 Docker 及 Container 技术的研究与发展。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/beijing/schedule


2019-08-17 00:005354

评论

发布
暂无评论
发现更多内容

Nautilus Chain 与 Coin98 生态达成合作,加速 Zebec 生态亚洲战略进程

EOSdreamer111

反敏捷宣言

俞凡

敏捷

Project Office X for Mac项目管理软件

展初云

Mac 项目管理软件 Mac软件

DaVinci Resolve Studio 18补丁中文包

胖墩儿不胖y

视频处理 Mac软件 视频编辑处理工具

What's new in Arana v0.2.0

apache/dubbo-go

MySQL开发

Nautilus Chain 与 Coin98 生态达成合作,加速 Zebec 生态亚洲战略进程

石头财经

Docker环境下部署Linux服务器ssh管理面板easynode

百度搜索:蓝易云

Docker 云计算 Linux SSH EasyNode

vm虚拟机:VMware Fusion Pro 13 for mac

展初云

虚拟机 Mac软件 VM虚拟机

揭开 Amazon Bedrock 的神秘面纱 | 基础篇

亚马逊云科技 (Amazon Web Services)

sdk 生成式人工智能 Amazon VPC

如何一键私有化部署 Laf ?

米开朗基杨

Android推送问题排查

MobTech袤博科技

智能推送

Android端自定义铃声

MobTech袤博科技

智能推送

Nautilus Chain 与 Coin98 生态达成合作,加速 Zebec 生态亚洲战略进程

大瞿科技

文心一言 VS 讯飞星火 VS chatgpt (117)-- 算法导论10.3 2题

福大大架构师每日一题

福大大架构师每日一题

Nautilus Chain 与 Coin98 生态达成合作,加速 Zebec 生态亚洲战略进程

股市老人

多年没有遇到如此流畅的面试了

HoneyMoose

基于TOGAF和WAF的企业级架构

俞凡

架构

2023-10-21:用go语言,一共有三个服务A、B、C,网络延时分别为a、b、c 并且一定有:1 <= a <= b <= c <= 10^9 但是具体的延时数字丢失了,只有单次调用的时间 一次调

福大大架构师每日一题

福大大架构师每日一题

Linux文件的目录结构解析

智趣匠

Nautilus Chain 与 Coin98 生态达成合作,加速 Zebec 生态亚洲战略进程

鳄鱼视界

Nautilus Chain 与 Coin98 生态达成合作,加速 Zebec 生态亚洲战略进程

BlockChain先知

体育直播观看平台开发成品源码”解决方案,提升用户的使用消费体验

软件开发-梦幻运营部

简化

agnostic

软件工程

快速入门SRPC

1412

c++ 开源 workflow srpc 脚手架

AI 画图,DALL.E 3 正式发布!全面解读 OpenAI 公告

豆哥

openai AI绘画 DALL.E 3

csh与bash区别及csh常用语法

百度搜索:蓝易云

云计算 unix 运维 Shell csh

阿尔比特质押 ARBT 代币挖矿系统开发(源码搭建)成熟技术

l8l259l3365

来看看 Discourse 3.2.0.beta2 版本添加的新功能

HoneyMoose

文件夹图标修改器 Folder Factory最新中文版

胖墩儿不胖y

Mac软件 文件夹图标修改工具

Sublime Text 4 for Mac代码编辑器

展初云

软件 Mac 代码编辑器

Python 循环

小万哥

Python 程序员 软件 后端 开发

京东如何基于容器打造高性能及效率的大数据平台_QCon_陈韦廷_InfoQ精选文章