AICon 深圳站 Keynote 嘉宾官宣!共探AI价值转化的实践路径 了解详情
写点什么

Volcano 在 Kubernetes 中运行高性能作业实践

  • 2019-08-13
  • 本文字数:545 字

    阅读完需:约 2 分钟

Volcano 在 Kubernetes 中运行高性能作业实践

ArchSummit深圳2019大会上,马达讲师做了《Volcano 在 Kubernetes 中运行高性能作业实践》主题演讲,主要内容如下。


演讲简介


随着 Kubernetes 的成熟,越来越多的用户希望 Kubernetes 可以作为统一平台同时支持在线业务和离线业务;但在支持离线任务方面 Kubernetes 还有很多不足,例如,Gang-scheduling, Fair-Share, Queue 等。Volcano 是基于 Kubernetes 的,运行离线作业/高性能作业的系统;支持主流的高性能作业负载,包括:机器学习/深度学习,生物信息学/基因组学,以及其他“大数据”应用程序。


在本次演讲中将介绍 Volcano 的总体架构,运行离线作业常见的问题及解决方案,与各个框架的集成情况以及对高性能工作负载的优化,并演示相应的功能和性能提升。


演讲提纲


  1. Volcano 总休架构

  2. Kubernetes 运行离线作业的问题及解决方案

  3. Volcano 与各个 AI 框架集成情况

  4. 总体性能优化

  5. 演示


听众受益点


  1. 如何在社区中运营一个开源项目

  2. 如何使用 Kubernetes 来运行 AI 等高性能作业

  3. 如何优化 Kubernetes 来支持计算类任务


讲师介绍


马达


华为云 技术专家


Kubernetes Scheduling 兴趣组联合负责人,Volcano 项目发起人及负责人。曾任职 IBM 架构师,IBM Spectrum Symphony 客户工程及维护负责人。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2019/shenzhen/schedule


2019-08-13 00:002636

评论

发布
暂无评论
发现更多内容

李飞飞:我更像物理学界的科学家,而不是工程师|深度学习崛起十年

OneFlow

人工智能 深度学习 李飞飞 ImageNet

传统企业在进行信息化升级的过程中,如何做好信息化顶层设计

BeeWorks

【6.3-6.10】精彩博文回顾

InfoQ写作社区官方

优质创作周报

2022 年 DevOps 路线图|Medium

观测云

Linux 之父亮相,OpenCloudOS 社区开放日来了

腾讯安全云鼎实验室

仅需三步学会使用低代码ThingJS与森数据DIX数据对接

ThingJS数字孪生引擎

可视化 数字孪生

APICloud可视化开发丨一键生成专业级源码

YonBuilder低代码开发平台

App 低代码 可视化 APICloud 移动端开发

APICloud 5月SDK发版说明

YonBuilder低代码开发平台

App 低代码 APICloud 可视化开发

APICloud可视化开发新手图文教程

YonBuilder低代码开发平台

App APICloud 低代码开发 移动端开发 可视化开发

掌握高性能计算前,我们先了解一下它的历史

华为云开发者联盟

华为云 高性能计算 处理器

改变世界的开发者丨玩转“俄罗斯方块”的瑶光少年

华为云开发者联盟

人工智能 华为云 俄罗斯方块

推开混合云市场大门,Lenovo xCloud的破局之道

脑极体

首批!青藤通过信通院CWPP能力评估检验

青藤云安全

网络安全 主机安全 信通院

如何使用物联网低代码平台进行工作表管理?

AIRIOT

低代码 物联网 低代码开发平台

很流行的状态管理库 MobX 是怎么回事?

岛上码农

flutter ios 安卓开发 跨平台开发 6月月更

搭建在线帮助中心,轻松帮助客户解决问题

小炮

为什么要开发分布式操作系统

LAXCUS分布式操作系统

分布式计算 分布式存储 超算 云边端协同 分布式操作

数据的软删除—什么时候需要?又如何去实现?

Geek_rze78a

6月月更

华为云鲲鹏DevKit代码迁移实战

乌龟哥哥

6月月更

Spark ShuffleManager

Geek_qsftko

大数据 spark

Java—基础容器

武师叔

6月月更

Flutter在数字生活的发展与天翼云盘落地实践

flutter 架构 混合应用开发 移动开发 客户端

ServerLess Aws Lambda攻击与横向方法研究

火线安全

云安全

第二届征文大赛开奖啦!速来领奖!

InfoQ写作社区官方

热门活动 初夏征文

一文带你了解J.U.C的FutureTask、Fork/Join框架和BlockingQueue

华为云开发者联盟

Java 开发 华为云

flutter系列之:UI layout简介

程序那些事

flutter 程序那些事 6月月更

新思科技在《 2022 年 Gartner® 应用安全测试关键能力报告》中表现优异 在五个常见用例中荣获最高分

InfoQ_434670063458

新思科技 Gartner 应用安全测试

图像搜索是什么

Geek_e369a5

图像搜索 图像搜索是什么

【愚公系列】2022年06月 面向对象设计原则(五)-接口隔离原则

愚公搬代码

6月月更

攻防演练 | 网络安全“吹哨人”:安全监控

青藤云安全

网络安全 主机安全 攻防演练

Vue-5-模板语法-2

Python研究所

前端 6月月更

Volcano 在 Kubernetes 中运行高性能作业实践_ArchSummit_马达_InfoQ精选文章