在QCon北京2018大会上,张建伟讲师做了《分布式计算系统的性能优化》主题演讲,主要内容如下。
演讲简介:
互联网时代,数据量爆发式增长。基于高性能的分布式计算系统,海量数据得到充分、及时的分析,才能最大化其价值。在这次演讲中,将与大家分享分布式计算系统中,在表示层、运行时、存储格式、新硬件等多方面的优化实践。
讲师介绍:
张建伟
百度 技术经理
百度智能云事业部大数据平台负责人,有多年超大规模数据平台研发、建设、运维和运营经验,对大数据采集、存储、查询、处理等全栈有非常深入的理解和实践。在百度负责运营十万台级别大数据平台,平台扩展性、性能、稳定性保持业界领先,支持业务包括百度内部搜索、广告以及百度云外部客户,应用收益明显。
完整演讲 PPT 下载链接:
https://qcon.infoq.cn/2018/beijing/schedule
更多内容推荐
开篇词 | 读论文是成为优秀工程师的成年礼
阅读论文就是去理解武功对应的“心法”,它可以让你不仅仅是只学会今时今日有用,而是能做到一辈子都受益。
2021-09-15
什么是大数据:从 GFS 到 Dataflow,12 年大数据生态演化图
要想学好大数据,我们需要先正本清源,弄清楚大数据在技术上到底涵盖了些什么。所以今天这节课,我就从大数据技术的核心理念和历史脉络这两个角度,来带你理解下什么是大数据技术。
2021-09-15
IoT 平台云端通用数据解析脚本实践——实践类
简介: 在物联网平台云端,将设备原始数据转换成结构化的JSON格式,方便云上业务系统存储和展示。
2023-02-28
如何利用资源管理技术,让 HTAP 负载同时运行?| DBTalk 技术公开课第 5 期
介绍在 HTAP 数据库中,如何制定资源管理策略,从而对各种不同类型的查询进行管理,使得资源管理的方式更有弹性和更为有效。
学习方法:建立你的大数据知识网络
一篇篇的大数据论文,并不是教科书里的一个章节或者一个知识点,而是对于一个重要的系统问题的解决方案。在读论文之前,先尝试自己去思考和解决对应的问题,有助于你更深刻地理解问题和解决方案的重点。
2021-09-22
HNCTF--Misc 部分题解
今天分享的三道题目都是属于杂项的
2022-11-04
开篇词|高并发系统,技术实力的试金石
高并发不会是区别大厂、小厂工程师的标准,却是检验技术实力的一道关。
2022-10-24
澳鹏 Appen 田小鹏博士:以高质量数据赋能 AI 驱动的元宇宙时代
“元宇宙”正在逐步走进现实。
2022-10-12
转转用户画像平台实践
本文主要是针对转转用户标签画像的建设实践,主要从标签的构建,标签的生产加工,存储设计,用户洞察,用户分群以及ID-MAPPING等几个方面阐述了一些经验和思考。
2022-12-15
14 位资深大咖,11 场技术演讲!龙蜥云原生专场精彩回顾来了
11 月 4 日,2022 云栖大会龙蜥云原生专场于杭州云栖小镇圆满结束。此次龙蜥云原生专场的主题是云原生技术在龙蜥社区的实践与未来,邀请了联通、移动、爱奇艺等 14 位资深专家与大家面对面聊云原生硬核技术,现场座无虚席,精彩不断。
2022-11-10
软件测试 | pytest 测试框架
简介
2023-03-03
HTAP 数据库存储引擎技术演进 | DBTalk 技术公开课第 5 期
近年来 HTAP 数据库受到工业界和学术界越来越多的关注,数据库存储引擎也从以往的面向 TP 场景的行存和面向 AP 场景的列存储独立发展的道路,走向了行存 + 列存并由存储引擎根据数据冷热度自动调度数据分布的混和形式,以实现在同一份数据上同时满足 TP AP 两种需求,并且降低用户存储成本,同时结合云原生时代的廉价对象存储可以进一步降低用户成本,本次分享将带来业界在存储引擎方向兼容 TP 与 AP 能力,打造极致性能的探索与实践。
开篇词 | 入门 Spark,你需要学会“三步走”
通过“学、用、写”不断迭代的学习方式,我把零散的开发技巧归纳成了结构化的知识体系。
2021-09-06
技术分享 | Web 测试方法与技术之 CSS 讲解
CSS 就是层叠样式表(Cascading Style Sheets),定义如何显示 HTML 元素。HTML 元素的样式通常存储在层叠样式表中。
2022-09-19
微众银行 TiDB HTAP 和自动化运维实践
本文根据微众银行资深数据库架构师黄蔚在 DevCon 2022 上的分享整理,主要讲述了微众银行对于 HTAP 架构的探索和实践情况,以及提升大规模分布式数据库运维效率的经验。
2023-02-06
Alibaba 全新出品百亿级高并发系统(全彩版小册开源)
如何提升系统性能,设计出一个靠谱的系统是每一个架构师或者正在往架构师方向进阶的同僚们都需要考虑的问题。公司所处的行业,业务场景决定了你设计的系统演进过程,不过万变不离其宗,系统设计和优化的思想都是相通的(当然如果你刚入行没多久,目前肯定还不
2023-02-08
方向:技术演进,到底该怎么思考未来?
从Hadoop,到Spark,到Flink,为什么大数据会有这三代的演进?是因为它们都解决了用户对这玩意儿的核心诉求,那用户对这几个大数据软件的核心诉求是什么?
2022-09-28
推荐阅读
01|背景信息:监控需求以及开源方案的横评对比
2023-01-09
关于 SysOM 2.0 网络 / 存储相关诊断功能介绍及案例展示 | 第 72-73 期
2023-03-14
易观千帆 | 2023 年 3 月银行 APP 月活跃用户规模盘点
2023-04-19
ByConity 如何在 Kubernetes 上无感扩缩容
结束语|为者常成,行者常至
2022-12-26
三天吃透 Spring Cloud 面试八股文
2023-03-18
15|实践方案:如何用 C++ 自实现链路跟踪?
2022-11-25
电子书
大厂实战PPT下载
换一换 白克宇 | 梅赛德斯-奔驰集团公司 IT/企业架构负责人
崔通 | 快手 基础架构负责人
王函 | 福特汽车 云计算资深架构师
评论