Mars:大规模张量计算系统的构建实践

2019 年 8 月 30 日

Mars:大规模张量计算系统的构建实践

随着数据规模的不断扩大和应用领域的不断拓展,当下的数据科学家和工程师不再满足于传统的分析方法和工具。Python 生态在数据领域的不断拓展也使得数据分析中对兼容 Python 生态工具的需求变得愈发强烈。Mars 正是为这一需求而开发的,试图兼容 Numpy 和 Pandas 的大规模张量计算系统,并已在若干个场景中落地。在本次分享中,我们将基于 Mars 以往的实践介绍系统架构和提升执行效率方面的实践。 阿里巴巴技术专家斯文骏即将在 QCon 全球软件开发大会(上海站)2019分享《Mars:大规模张量计算系统的构建实践


听众受益


  1. 了解 Mars 如何建模大规模张量计算问题并拆解为分布式执行;

  2. 了解 Mars 如何使用 Python 构建分布式调度系统;

  3. 了解细粒度张量计算图调度中可能遇到的问题及其对策;

  4. 了解 Mars 的应用范围和未来的发展方向。


嘉宾介绍


斯文骏,阿里巴巴计算平台事业部技术专家,硕士研究生毕业后加入阿里巴巴,先后参与机器学习平台和 PyODPS 开发,2017 年参与启动 Mars 开发,为 Mars 分布式引擎主要开发者。


更多大数据分析的支撑技术的相关分享请访问 QCon 上海 2019 官网。


2019 年 8 月 30 日 00:00269

评论

发布
暂无评论
发现更多内容

菩萨蛮·记游(二)

轩辕御龙

Netty系列之源码解析(一)

猿灯塔

Netty

四、Docker 网络原理、分类及容器互联配置

悟尘

Docker Kubernetes 容器 k8s Compose

广告与数据算法系列1.1.1: 什么是广告

黄崇远@数据虫巢

互联网 算法 广告

Make Tmux Great Again

ccx

tmux

从翻译到本地化:我在Airbnb做本地化经理的经历

葛仲君

产品 翻译 Airbnb 本地化 全球化

忆秦娥·记游(三)

轩辕御龙

Flink Weekly | 每周社区动态更新

Apache Flink

大数据 flink 流计算 实时计算 大数据处理

一、Docker基础入门及架构介绍

悟尘

Docker Kubernetes 容器 k8s Compose

初入响应式编程(下)

CD826

spring 微服务 响应式编程 reactor

如何学习区块链技术

Kaichao

比特币 区块链 以太坊

记游(四)

轩辕御龙

Java并发编程系列——Fork-Join

孙苏勇

Java Java并发 并发编程 线程

web集群架构

桥哥技术之路

三、基于 Docker-registry/Nexus3 搭建本地仓库

悟尘

Docker Kubernetes 容器 k8s Compose

回"疫"录(6):致敬最美逆行者

小天同学

疫情 回忆录 现实纪录 纪实 创新突破

redis数据结构介绍三-第三部分 整数集合

Nick

redis 源码 数据结构 源码分析 算法

开发机直连Docker中的redis容器小案例

麦叔

redis Docker

Istio 1.5:对开发人员有什么帮助?

麦叔

云原生 istio servicemesh

最通俗易懂的H264基本原理

音视频专家-李超

音视频 WebRTC ffmpeg 音视频会议 H264

我认为“写作平台”还缺少读者

小天同学

产品 反馈 写作平台 建议

redis数据结构介绍二-第二部分 跳表

Nick

redis 源码 数据结构 源码分析 算法

没有永恒的技术,只有适合的技术

码闻强

技术 个人成长 职业规划

废掉一个人最好的办法是让他忙到没有时间思考

熊斌

程序员人生 职场 思考

音视频已强势崛起,我们该如何快速入门音视频技术?

音视频专家-李超

音视频 WebRTC ffmpeg 在线教育 音视频会议

B站、Quora、InfoQ,哪个的阅读/播放量会先到10W+?

赵新龙

写作平台 B站 Quora

程序员陪娃漫画系列——排队问题

孙苏勇

程序员 生活 程序员人生 陪伴 漫画

西江月·记游(一)

轩辕御龙

多人实时互动之各WebRTC流媒体服务器比较

音视频专家-李超

WebRTC 在线教育 音视频会议 mediasoup janus

工作时间都去哪儿了?

伯薇

效率 时间管理 个人提升 团队

二、基于 Dockerfile 构建并运行镜像

悟尘

Docker Kubernetes 容器 k8s Compose

Mars:大规模张量计算系统的构建实践-InfoQ