写点什么

揭秘微信背后万级机器的管理者 Yard 平台

  • 2019-09-14
  • 本文字数:656 字

    阅读完需:约 2 分钟

揭秘微信背后万级机器的管理者Yard平台

ArchSummit深圳2018大会上,文杰讲师做了《揭秘微信背后万级机器的管理者 Yard 平台》主题演讲,主要内容如下。


演讲简介


微信作为一款国民 App,每天承载着数百亿条的消息收发,而支撑着微信功能的后台服务也多达数万个,如何确保这些在线服务的稳定可用和可控,是资源管理系统面临的一大挑战。


与此同时,随着 AI 技术的方兴未艾,围绕着微信所开展的机器学习与数据挖掘的离线作业也日渐增多,对内部计算、存储、网络等资源提出了大量的需求,如何充分利用好服务器资源,高效调度各类计算作业,合理编排不同维度的资源组合也是资源调度系统的一个重要目标。


本主题阐述了微信的资源调度系统 Yard 如何利用容器技术解决在线服务与离线作业混合运行的各种问题挑战,分享微信后台在资源隔离、作业调度、容灾设计等方面的成功实践和思考。

演讲提纲

  • 背景

  • 微信后台资源管理发展历程

  • 在线服务和离线作业的资源抢夺战

  • 微信资源调度系统 Yard

  • 系统架构

  • 资源隔离的“舍”与“得”

  • 调度的 AI

  • 网红 Docker 在 Yard 中的应用

  • 踩过的“坑”与“坑”外的思考

  • 成果展示 &未来展望


讲师介绍


文杰


腾讯 微信技术架构部专家工程师


2005 年入职腾讯,曾参与主导搜索引擎,分布式存储,分布式计算等多个项目的整体架构;2013 年加入微信,现任技术架构部下大数据平台团队负责人,主导微信两项基础平台:微信资源调度 Yard 平台和微信流量实验 X 平台的研发;在分布式设计,高可用架构,任务调度,搜索引擎,高性能服务,大数据计算等领域有浓厚兴趣和实践经验。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2018/shenzhen/schedule


2019-09-14 17:101646

评论

发布
暂无评论
发现更多内容

产品经理训练营-第一次作业

Jophie

产品经理训练营

下一代消息队列pulsar到底是什么

比伯

Java 编程 架构 面试 计算机

「产品经理训练营」作业01:如果公司要招一个高级版的你

狷介

产品经理训练营

第一章 认识产品经理(下)

郭栋

安全白帽子可能会为DevSecOps铺平道路

啸天

DevSecOps 应用安全 开发安全

产品经理训练营第一周总结

happy-黑皮

产品经理训练营

你还在担心搞不定面试官?吃透这份4000道Java面试真题合集,金三银四的黑马就是你了

Java 编程 程序员 面试

产品经理训练营-第一章作业

Ryun

HTML(二)——用html设置文本

程序员的时光

程序员 28天写作

产品经理训练营——第一周总结

小匚

产品经理训练营 极客大学产品经理训练营

产品经理训练营第0期 第一次作业

孙行者

第0期 产品经理训练营

产品经理训练营第一周作业

happy-黑皮

产品经理训练营

产品经理训练营——作业1

小匚

Python 字节跳动 产品经理训练营 极客大学产品经理训练营

重学JS | cookie和localstorage的哪个更安全?

梁龙先森

面试 大前端 编程语言 28天写作

产品经理训练营第一章作业

王德文

产品经理训练营

28天瞎写的第二百二十二天:五道营胡同的葡萄芽儿

树上

28天写作

高仿书旗小说 Flutter 版,学起来

GitHub指北

Kafka底层原理剖析(近万字建议收藏)

五分钟学大数据

大数据 kafka

杭州产品岗位现状分析

王振

产品训练营作业:1、认识产品经理

Geek_06d2e5

如果公司要找一个人代替我,该是个咋样的人?

再见陛下

offer

产品训练营第一周作业【撰写岗位模型】

马悦

学习 产品 产品经理训练营

第一周作业

Geek_72d5ab

GMT UTC CST ISO 夏令时 时间戳,都是些什么鬼?

YourBatman

ISO 时间戳 GMT UTC

动力电池知识皮毛(28天写作 Day11/28)

mtfelix

自动驾驶 28天写作 电动汽车

你真的知道如何删除list集合中特定元素吗

万里无云

Java List remove

细说MAC地址漂移

现在就开始倒数2030了? 华为的这条线索不能错过

脑极体

面试官:如果让你设计一个高并发的消息中间件,你会怎么做?

冰河

并发编程 高并发 消息队列 消息中间件

Zookeeper面试常见11个连环炮

田维常

面试

JVM性能调优实战:让你的IntelliJ Idea纵享丝滑

Silently9527

Java jvm调优

揭秘微信背后万级机器的管理者Yard平台_ArchSummit_文杰_InfoQ精选文章