写点什么

Volcano 在 Kubernetes 中运行高性能作业实践

  • 2019-08-13
  • 本文字数:545 字

    阅读完需:约 2 分钟

Volcano 在 Kubernetes 中运行高性能作业实践

ArchSummit深圳2019大会上,马达讲师做了《Volcano 在 Kubernetes 中运行高性能作业实践》主题演讲,主要内容如下。


演讲简介


随着 Kubernetes 的成熟,越来越多的用户希望 Kubernetes 可以作为统一平台同时支持在线业务和离线业务;但在支持离线任务方面 Kubernetes 还有很多不足,例如,Gang-scheduling, Fair-Share, Queue 等。Volcano 是基于 Kubernetes 的,运行离线作业/高性能作业的系统;支持主流的高性能作业负载,包括:机器学习/深度学习,生物信息学/基因组学,以及其他“大数据”应用程序。


在本次演讲中将介绍 Volcano 的总体架构,运行离线作业常见的问题及解决方案,与各个框架的集成情况以及对高性能工作负载的优化,并演示相应的功能和性能提升。


演讲提纲


  1. Volcano 总休架构

  2. Kubernetes 运行离线作业的问题及解决方案

  3. Volcano 与各个 AI 框架集成情况

  4. 总体性能优化

  5. 演示


听众受益点


  1. 如何在社区中运营一个开源项目

  2. 如何使用 Kubernetes 来运行 AI 等高性能作业

  3. 如何优化 Kubernetes 来支持计算类任务


讲师介绍


马达


华为云 技术专家


Kubernetes Scheduling 兴趣组联合负责人,Volcano 项目发起人及负责人。曾任职 IBM 架构师,IBM Spectrum Symphony 客户工程及维护负责人。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2019/shenzhen/schedule


2019-08-13 00:002710

评论

发布
暂无评论
发现更多内容

(序)【Spring源码专题】展开Spring源码构建之旅(利用IDEA和Gradle)

码界西柚

spring 6月日更 源码搭建

最佳的管理者-库克

卢卡多多

苹果 管理者 6月日更

计算机网络概述

若尘

计算机网络 6月日更

JAVA 面向对象 (十二)-- 关键字 super

加百利

Java 关键字 super 6月日更

谁也讲不明白的SQL注入攻击被我讲明白了(中)?

网络安全学海

程序员 网络安全 计算机 渗透测试 SQL注入

基于机器学习的自动化测试弹窗处理实践

bilibili游戏技术

手机 自动化测试 yolo 弹窗

架构实战训练营 - 模块七课后作业

Johnny

架构实战营

这样理解Mysql索引,阿里面试官也给你点赞

慕枫技术笔记

MySQL 后端 索引

硬刚Apache Iceberg | 技术调研&在各大公司的实践应用大总结

王知无

可编程网关 Pipy 第三弹:事件模型设计

张晓辉

我的书要出版啦~

石璞东

深度学习 tensorflow 大前端 计算机视觉 卷积神经网络

硬刚数据仓库|SQL Boy的福音之数据仓库体系建模&实施&注意事项小总结

王知无

架构实践营模块7作业

Geek_649372

架构训练营

[译] D8 优化

Antway

6月日更

2021最新Spring Security知识梳理

北游学Java

Java spring

硬刚ClickHouse | 4万字长文ClickHouse基础&实践&调优全视角解析

王知无

浏览器设备信息UserAgent查询

入门小站

工具

Spring事件发布与监听机制

陈皮的JavaLib

Java spring 事件监听

sftp的使用

Hello

Linux之cat命令

入门小站

Linux

创业者需要知道的13种思维模型

俞凡

创业 认知

「SQL数据分析系列」10. 重谈连接

Databri_AI

数据库 sql 连接

zip解压缩

Hello

基于FPGA系统合成两条视频流实现3D视频效果

不脱发的程序猿

智能硬件 FPGA系统 视频流 合成3D视频

硬刚Hbase - 17道题你能秒我?我Hbase八股文反手就甩你一脸

王知无

前端面试 | 18个常见HTML问题与答案

devpoint

html xml 6月日更

如何做好技术选型和分析决策

Man

技术选型 CMMI

kubelet分析-csi driver注册分析-Node Driver Registrar源码分析

良凯尔

源码 Kubernetes CSI Kubernetes Plugin

文件IO

Hello

硬刚Presto | Presto原理&调优&面试&实战全面升级版

王知无

迷惘的六月份

卢卡多多

生活状态 6月日更

Volcano 在 Kubernetes 中运行高性能作业实践_ArchSummit_马达_InfoQ精选文章