写点什么

Volcano 在 Kubernetes 中运行高性能作业实践

  • 2019-08-13
  • 本文字数:545 字

    阅读完需:约 2 分钟

Volcano 在 Kubernetes 中运行高性能作业实践

ArchSummit深圳2019大会上,马达讲师做了《Volcano 在 Kubernetes 中运行高性能作业实践》主题演讲,主要内容如下。


演讲简介


随着 Kubernetes 的成熟,越来越多的用户希望 Kubernetes 可以作为统一平台同时支持在线业务和离线业务;但在支持离线任务方面 Kubernetes 还有很多不足,例如,Gang-scheduling, Fair-Share, Queue 等。Volcano 是基于 Kubernetes 的,运行离线作业/高性能作业的系统;支持主流的高性能作业负载,包括:机器学习/深度学习,生物信息学/基因组学,以及其他“大数据”应用程序。


在本次演讲中将介绍 Volcano 的总体架构,运行离线作业常见的问题及解决方案,与各个框架的集成情况以及对高性能工作负载的优化,并演示相应的功能和性能提升。


演讲提纲


  1. Volcano 总休架构

  2. Kubernetes 运行离线作业的问题及解决方案

  3. Volcano 与各个 AI 框架集成情况

  4. 总体性能优化

  5. 演示


听众受益点


  1. 如何在社区中运营一个开源项目

  2. 如何使用 Kubernetes 来运行 AI 等高性能作业

  3. 如何优化 Kubernetes 来支持计算类任务


讲师介绍


马达


华为云 技术专家


Kubernetes Scheduling 兴趣组联合负责人,Volcano 项目发起人及负责人。曾任职 IBM 架构师,IBM Spectrum Symphony 客户工程及维护负责人。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2019/shenzhen/schedule


2019-08-13 00:002579

评论

发布
暂无评论
发现更多内容

数字人民币对人民币国际化的长远影响

CECBC

盘点JavaScript哪些常用的数组对象

你好bk

JavaScript 大前端 数组 html/css 12月日更

团建的目的是什么?(7/28)

赵新龙

28天写作

图解栈帧,别再死记硬背

李子捌

Java 28天写作 12月日更

1-1聚合架构第二讲:企业架构的认知历程

钰湚—付晓岩

企业架构 软件工程 数字化转型 软件架构 业务架构

1-3聚合架构第四讲:工程方法的进步也不容易

钰湚—付晓岩

企业架构 软件工程 数字化转型 软件架构 业务架构

1-6聚合架构第七讲:聊聊togaf的发展历程

钰湚—付晓岩

企业架构 软件工程 数字化转型 软件架构

🏆【Alibaba中间件技术系列】「Sentinel技术专题」分布式系统的流量防卫兵的基本介绍(入门源码介绍)

码界西柚

Sentine SpringCloud Alibaba Alibaba技术 限流熔断 12月日更

面向 JavaScript 开发人员的 5 大物联网库

devpoint

JavaScript 元宇宙 12月日更 meta

S 锁与 X 锁的爱恨情仇《死磕MySQL系列 四》

咔咔

MySQL 共享锁 排它锁

1-5聚合架构第六讲:聊聊开山祖Zachman框架

钰湚—付晓岩

企业架构 软件工程 数字化转型 软件架构 业务架构

中国制造的“天工开物”新篇,如何在云上进化?

脑极体

数据产品实战-业务洞察

第519区

数据分析 产品经理 数据产品经理 指标体系 数据洞察

代码出现异常时,我应该怎么处理?

JavaEdge

签约计划第二季

MySQL探秘(七):InnoDB行锁算法

程序员历小冰

MySQL 28天写作 12月日更

MySQL强人“锁”难《死磕MySQL系列 三》

咔咔

MySQL

程序员有哪些提升幸福感的专属神器?

Jackpop

1-4聚合架构第五讲:架构方法的进步也不容易

钰湚—付晓岩

企业架构 软件工程 数字化转型 软件架构 业务架构

架构实战营模块一作业

novoer

「架构实战营」

37 K8S之容器网络模型

穿过生命散发芬芳

k8s 28天写作 12月日更

一生挚友redo log、binlog《死磕MySQL系列 二》

咔咔

MySQL Binlog Redo Log

2021创作者签约计划-文章合集

卢卡多多

内容合集 签约计划第二季

程序员的“双十二”大礼包,上海拆箱啦!

百度大脑

人工智能

[Pulsar] 订阅跳过一定数量消息的原理

Zike Yang

Apache Pulsar 12月日更

1-2聚合架构第三讲:从包饺子看工程与架构

钰湚—付晓岩

企业架构 软件工程 数字化转型 软件架构 业务架构

定时删除指定目录的过期文件(linux)

liuzhen007

28天写作 12月日更

如何选择普通索引和唯一索引《死磕MySQL系列 五》

咔咔

MySQL 唯一索引 普通索引

通过阅读 SpringCloud 源码 来 理解接口和抽象的区别

悟空聊架构

接口 抽象 28天写作 悟空聊架构 12月日更

分布式理论之CAP理论

卢卡多多

CAP理论 12月日更

单例模式

卢卡多多

28天写作

聊聊 Kafka: Kafka 为啥这么快?

老周聊架构

签约计划第二季

Volcano 在 Kubernetes 中运行高性能作业实践_ArchSummit_马达_InfoQ精选文章