【AICon】探索RAG 技术在实际应用中遇到的挑战及应对策略!AICon精华内容已上线73%>>> 了解详情
写点什么

京东如何基于容器打造高性能及效率的大数据平台

  • 2019-08-17
  • 本文字数:632 字

    阅读完需:约 2 分钟

京东如何基于容器打造高性能及效率的大数据平台

QCon北京2018大会上,范振、陈韦廷讲师做了《京东如何基于容器打造高性能及效率的大数据平台》主题演讲,主要内容如下。


演讲简介


容器化后已经成为云端平台的技术趋势,但其性能表现常常是人们却步或怀疑的。这个主题,我们将介绍京东如何透过 Docker 及 Kubernetes 为基底,打造完整且高性能高效率的大数据平台服务。我们将从多个不同的面向让听众深入了解大数据的应用在容器化后对性能和整体服务所带来的影响:从基础的硬件测试包括 fio,iperf 等等,到真实的应用场景测试如 Spark Streaming or Machine Learning 的工作,再到容器化后资源的利用率和效率所带来的影响。

听众受益

  1. 如何基于容器打造高性能高效率的大数据平台;

  2. 透过 fio,iperf…等等简单的测试工具得到平台的基础性能报告及比较;

  3. 真实大数据工作量(包括 Streaming 和机器学习)的比较结果;

  4. 高性能基础设施的打造经验分享。


讲师介绍


范振


京东 软件开发工程师


范振是服务于京东 AI 与大数据部的软件开发工程师。2014 年加入京东,从事基础平台架构、开发工作;反比价项目、机器学习平台项目的负责人;在高性能服务器、大数据领域有着丰富的经验和视野。


陈韦廷


Intel 资深软件工程师


陈韦廷是一名英特尔资深软件工程师。他致力于大数据及云计算相关领域的解决方案达 6 年以上的时间。他的主要工作为大数据在云计算解决方案的研发,效能调优及客户的支持。目前主要专注于大数据在 Docker 及 Container 技术的研究与发展。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/beijing/schedule


2019-08-17 00:005340

评论

发布
暂无评论
发现更多内容

「微服务的细节」—— 周期性注册 or 一次性注册

袁世超

微服务

数据资产管理

奔向架构师

数据资产 数据管理 6月月更

服务治理的工作内容

阿泽🧸

微服务 6月月更

Discourse 新用户可插入媒体的数量

HoneyMoose

Any to Any 实时变声的实现与落地丨RTC Dev Meetup

声网

音频 RTC Dev Meetup 生态专栏 语音处理

数据库每日一题---第18天:每天的领导和合伙人

知心宝贝

数据库 大数据 前端 后端 6月月更

透过华为军团看科技之变(四):互动媒体(音乐)

脑极体

AWS的运营管理类服务

冯亮

云计算 AWS

【网络入门】详解常用的基础网络知识(面试常考内容)

dvlinker

网络知识 TCP与UDP 心跳机制与丢包重传 网络命令 抓包分析

vue导航路由

小恺

6月月更

军体拳代码

工程师日月

6月月更

Larix真正的去中心化借贷平台,并开启double Mining活动

鳄鱼视界

百度安全再次亮相高性能计算国际顶会SC 2022 — 采用Fuzzing技术防护高性能计算静默数据损坏安全风险

百度安全

百度安全 百度安全实验室 高性能计算国际顶会 SC 2022 Fuzzing技术防护

在线文本列表批量添加行号工具

入门小站

工具

在线JSON转YAML工具

入门小站

工具

【网络进阶】网络问题排查实例集锦(实战经验分享)

dvlinker

Linux 服务器 网络知识 网络进阶

leetcode 221. Maximal Square 最大正方形(中等)

okokabcd

LeetCode 动态规划 数据结构与算法

接口测试(apipost、jmeter和python脚本)——测试工具

Xd

Java 后端 接口测试

一问带你彻底了解JVM-Java虚拟机内存区域详解

派大星

JVM

uni-app进阶之创建组件/原生渲染【day9】

恒山其若陋兮

6月月更

linux之我常用的20条命令( 之三)

入门小站

Linux

Java Core 「13」ReentrantReadWriteLock 再探析

Samson

学习笔记 Java core 6月月更

深挖数据价值,2022隐私计算大赛开启!

Jessica@数牍

隐私计算 大数据技能大赛 隐匿查询性能优化 隐私求交性能优化

攻防演练中红队的内网横向扩展

穿过生命散发芬芳

6月月更 攻防演练

新课上线 | 每次 5 分钟,轻松玩转阿里云容器服务!

阿里巴巴云原生

阿里云 云原生 容器服务

小红书严打买卖账号及刷量作弊行为:必须维护平台的公信力

石头IT视角

Hoo虎符研究院 | 币圈后浪D/Bond一个基于ERC-3475标准开发的去中心化债券生态系统平台

区块链前沿News

Hoo 虎符交易所

稳住了,别抖!—— 看GetX 的Worker如何防抖

岛上码农

flutter ios 前端 安卓开发 6月月更

统一日志

卢卡多多

日志 6月月更

Android 修改系统音量及监听

yechaoa

android 6月月更 AudioManager

JVM调优简要思想及简单案例-新生代回收算法

zarmnosaj

6月月更

京东如何基于容器打造高性能及效率的大数据平台_QCon_陈韦廷_InfoQ精选文章