写点什么

揭秘微信背后万级机器的管理者 Yard 平台

  • 2019-09-14
  • 本文字数:656 字

    阅读完需:约 2 分钟

揭秘微信背后万级机器的管理者Yard平台

ArchSummit深圳2018大会上,文杰讲师做了《揭秘微信背后万级机器的管理者 Yard 平台》主题演讲,主要内容如下。


演讲简介


微信作为一款国民 App,每天承载着数百亿条的消息收发,而支撑着微信功能的后台服务也多达数万个,如何确保这些在线服务的稳定可用和可控,是资源管理系统面临的一大挑战。


与此同时,随着 AI 技术的方兴未艾,围绕着微信所开展的机器学习与数据挖掘的离线作业也日渐增多,对内部计算、存储、网络等资源提出了大量的需求,如何充分利用好服务器资源,高效调度各类计算作业,合理编排不同维度的资源组合也是资源调度系统的一个重要目标。


本主题阐述了微信的资源调度系统 Yard 如何利用容器技术解决在线服务与离线作业混合运行的各种问题挑战,分享微信后台在资源隔离、作业调度、容灾设计等方面的成功实践和思考。

演讲提纲

  • 背景

  • 微信后台资源管理发展历程

  • 在线服务和离线作业的资源抢夺战

  • 微信资源调度系统 Yard

  • 系统架构

  • 资源隔离的“舍”与“得”

  • 调度的 AI

  • 网红 Docker 在 Yard 中的应用

  • 踩过的“坑”与“坑”外的思考

  • 成果展示 &未来展望


讲师介绍


文杰


腾讯 微信技术架构部专家工程师


2005 年入职腾讯,曾参与主导搜索引擎,分布式存储,分布式计算等多个项目的整体架构;2013 年加入微信,现任技术架构部下大数据平台团队负责人,主导微信两项基础平台:微信资源调度 Yard 平台和微信流量实验 X 平台的研发;在分布式设计,高可用架构,任务调度,搜索引擎,高性能服务,大数据计算等领域有浓厚兴趣和实践经验。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2018/shenzhen/schedule


2019-09-14 17:101940

评论

发布
暂无评论
发现更多内容

专家解读 | NIST网络安全框架(2):核心功能

权说安全

网络安全

被众多AI大佬看好的具身智能到底是什么?它凭什么成为下一个AI浪潮?

博文视点Broadview

取代或转型?人工智能对软件测试的影响(内附工具推荐)

禅道项目管理

人工智能 AI 软件测试 自动化测试 测试人员

软件测试学习笔记丨Jenkins安装与配置-霍格沃兹测试开发学社

测试人

软件测试 jenkins

事业-最佳实践-架构-团队技术规划

南山

架构 规划 架构规划

寻找高质量数据之旅:您的数据指南 ️

蛙人族

Data 数据集 数据集成 阿里云; 大数据‘’

数据应用场景,欢迎分享!

蛙人族

Data 大数据‘’

蚂蚁数科 MAPPIC 密态计算云平台入驻阿里云计算巢

蚂蚁数科技术园

阿里云 隐私计算 数据要素

【等保小知识】等保服务是一次性服务吗?为什么?怎么理解?

行云管家

等保 等级保护 等保测评 等保服务

事业-最佳实践-项目管理-MVP版本拆解

南山

项目管理 MVP MVP版本 需求拆解 项目拆解

事业-最佳实践-项目管理-项目关键节点

南山

项目管理 关键节点

阿里云天池AI课程证书学习计划

阿里云天池

阿里云

解读注意力机制原理,教你使用Python实现深度学习模型

华为云开发者联盟

Python 人工智能 华为云 华为云开发者联盟 企业号2024年5月PK榜

从智能马桶到“万物互联”生态,这家国货品牌领跑卫浴新趋势

Alter

数据价值的挖掘,有哪些实现路径呢?

蛙人族

Data 数据集 阿里云; 大数据‘’

揭秘微信背后万级机器的管理者Yard平台_ArchSummit_文杰_InfoQ精选文章