Volcano 在 Kubernetes 中运行高性能作业实践

阅读数:388 2019 年 8 月 13 日 00:00

Volcano 在 Kubernetes 中运行高性能作业实践

ArchSummit 深圳 2019 大会上,马达讲师做了《Volcano 在 Kubernetes 中运行高性能作业实践》主题演讲,主要内容如下。

演讲简介

随着 Kubernetes 的成熟,越来越多的用户希望 Kubernetes 可以作为统一平台同时支持在线业务和离线业务;但在支持离线任务方面 Kubernetes 还有很多不足,例如,Gang-scheduling, Fair-Share, Queue 等。Volcano 是基于 Kubernetes 的,运行离线作业 / 高性能作业的系统;支持主流的高性能作业负载,包括:机器学习 / 深度学习,生物信息学 / 基因组学,以及其他“大数据”应用程序。

在本次演讲中将介绍 Volcano 的总体架构,运行离线作业常见的问题及解决方案,与各个框架的集成情况以及对高性能工作负载的优化,并演示相应的功能和性能提升。

演讲提纲

  1. Volcano 总休架构
  2. Kubernetes 运行离线作业的问题及解决方案
  3. Volcano 与各个 AI 框架集成情况
  4. 总体性能优化
  5. 演示

听众受益点

  1. 如何在社区中运营一个开源项目
  2. 如何使用 Kubernetes 来运行 AI 等高性能作业
  3. 如何优化 Kubernetes 来支持计算类任务

讲师介绍

马达

华为云 技术专家

Kubernetes Scheduling 兴趣组联合负责人,Volcano 项目发起人及负责人。曾任职 IBM 架构师,IBM Spectrum Symphony 客户工程及维护负责人。

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

Volcano 在 Kubernetes 中运行高性能作业实践

完整演讲 PPT 下载链接

https://archsummit.infoq.cn/2019/shenzhen/schedule

评论

发布