写点什么

Volcano 在 Kubernetes 中运行高性能作业实践

  • 2019-08-13
  • 本文字数:545 字

    阅读完需:约 2 分钟

Volcano 在 Kubernetes 中运行高性能作业实践

ArchSummit深圳2019大会上,马达讲师做了《Volcano 在 Kubernetes 中运行高性能作业实践》主题演讲,主要内容如下。


演讲简介


随着 Kubernetes 的成熟,越来越多的用户希望 Kubernetes 可以作为统一平台同时支持在线业务和离线业务;但在支持离线任务方面 Kubernetes 还有很多不足,例如,Gang-scheduling, Fair-Share, Queue 等。Volcano 是基于 Kubernetes 的,运行离线作业/高性能作业的系统;支持主流的高性能作业负载,包括:机器学习/深度学习,生物信息学/基因组学,以及其他“大数据”应用程序。


在本次演讲中将介绍 Volcano 的总体架构,运行离线作业常见的问题及解决方案,与各个框架的集成情况以及对高性能工作负载的优化,并演示相应的功能和性能提升。


演讲提纲


  1. Volcano 总休架构

  2. Kubernetes 运行离线作业的问题及解决方案

  3. Volcano 与各个 AI 框架集成情况

  4. 总体性能优化

  5. 演示


听众受益点


  1. 如何在社区中运营一个开源项目

  2. 如何使用 Kubernetes 来运行 AI 等高性能作业

  3. 如何优化 Kubernetes 来支持计算类任务


讲师介绍


马达


华为云 技术专家


Kubernetes Scheduling 兴趣组联合负责人,Volcano 项目发起人及负责人。曾任职 IBM 架构师,IBM Spectrum Symphony 客户工程及维护负责人。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2019/shenzhen/schedule


2019-08-13 00:002623

评论

发布
暂无评论
发现更多内容

翻译:《实用的Python编程》07_00_Overview

codists

Python

28天

ES_her0

28天写作 3月日更

多队列网卡简介

依旧廖凯

28天写作 3月日更

老板要我开发一个简单的工作流引擎

Java小咖秀

架构 工作流 开发 工作流调度 工作流引擎

打通Jira与钉钉和企业微信不再难

跟YY哥学Jira

钉钉 Jira 企业微信 automation

十步输出设计文档

鲁米

设计实践

配置引起事故复盘

风翱

3月日更

这份1307页Android面试全套真题解析,源码+原理+手写框架

欢喜学安卓

android 程序员 面试 移动开发

《Redis 核心技术与实战》学习笔记 04

escray

redis 学习 28天写作 3月日更 Redis 核心技术与实战

思考需要大声,写下便是永恒——未完待续

Justin

总结 28天写作

翻译:《实用的Python编程》07_01_Variable_arguments

codists

Python

Python 随机数函数 choices

HoneyMoose

Python 分通道读取图像数据,取经之路第 4 天

梦想橡皮擦

28天写作 3月日更

永动金融EGG公链去中心化社交平台与通证EFTalk全球正式亮相

币圈那点事

区块链

【LeetCode】逆波兰表达式求值Java题解

Albert

算法 LeetCode 28天写作 3月日更

2021年Java春招高级面试指南(1到5年Java面试者必备)

比伯

Java 编程 架构 面试 程序人生

蚂蚁二面:MQ消费端遇到瓶颈除了横向扩容外还有其他解决办法?

中间件兴趣圈

面试 RocketMQ 消息中间件

最近的一点思考「Day 28」

道伟

28天写作

国内可用镜像站整理

弘毅

寻找被遗忘的勇气(二十)

Changing Lin

3月日更

2020年张小龙非公开课的一点思考

lenka

3月日更

有利可图的NFT,NA公链(Nirvana Chain)NAC公链怎么面对高额Gas费的?

区块链第一资讯

区块链 公链 挖矿

基于SpringCloud,支持安卓、IOS、包含前后端等等完整网约车项目

Java架构追梦

Java 架构 面试 SpringCloud 网约车项目

这些面试题你会吗?6年菜鸟开发面试字节跳动安卓研发岗,复习指南

欢喜学安卓

android 程序员 面试 移动开发

C++线程池ThreadPoolExecutor实现原理

Linux服务器开发

c++ 后端 线程池 Linux服务器开发 Linux后台开发

Wireshark数据包分析学习笔记Day16

穿过生命散发芬芳

Wireshark 数据包分析 3月日更

Python 随机字符串

HoneyMoose

Go语言学习笔记:数组

worry

数组 Go 语言

MySQL如何选择主键

架构精进之路

MySQL 3月日更

TCP 三次握手与四次挥手

insight

TCP 3月日更

我在阿里实习做开源

apache/dubbo-go

微服务 程序人生 云原生 dubbo dubbogo

Volcano 在 Kubernetes 中运行高性能作业实践_ArchSummit_马达_InfoQ精选文章