写点什么

如何快速打造高稳定千亿级别对象存储平台

  • 2019-08-31
  • 本文字数:525 字

    阅读完需:约 2 分钟

如何快速打造高稳定千亿级别对象存储平台

QCon上海2018大会上,赵健博讲师做了《如何快速打造高稳定千亿级别对象存储平台》主题演讲,主要内容如下。


演讲简介


快手每天都有海量的视频数据上传存储,到目前为止所有的视频以及衍生数据总量更是数量庞大,且视频本身有大有小,如何存储这些数据将是一个颇具挑战性的问题。本次演讲将会介绍一种可以快速构建海量短视频存储的服务的方案、我们在实践中遇到的问题以及解决方案,例如我们是怎么解决高可用、高扩展性、高性能等问题的。

主要内容

  1. 在线短视频存储服务系统的要求;

  2. 在线短视频存储服务系统的架构与实现细节;

  3. 实践中遇到的问题与解决方案;

  4. 未来规划。

听众受益

  1. 掌握如何快速构建一个海量对象存储服务;

  2. 了解到海量分布式存储服务可能会遇到的一些问题,如可用性、扩展性、性能问题,并针对这些问题提供一种解决方案。


讲师介绍


赵健博


快手 高级架构师


赵健博,快手大数据架构团队的负责人,负责快手公司内 Hadoop 生态中存储、调度、计算、AI 架构等子系统内核与周边子系统的研发,与在公司内的应用。先后就职于百度、奇虎 360、58 集团,快手。大数据领域专家,2009 年毕业于中国科学院计算所,主要研究领域包括分布式计算、调度与存储系统等。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-31 17:031233

评论

发布
暂无评论
发现更多内容

架构师训练营第二周作业

lakers

极客大学架构师训练营

SpringCloud 和 SpringBoot 版本选型

hepingfly

微服务 springboot SpringCloud 选型

Scrapy源码剖析(一)架构概览

Kaito

Python 爬虫 Scrapy 源码剖析

架构师训练营第 1 期 第 6 周作业

李循律

极客大学架构师训练营

架构师训练营第二周总结

lakers

极客大学架构师训练营

「架构师训练营第 1 期」第六周作业

张国荣

目标检测学习-比赛路线

Dreamer

元模型驱动(三):构建我们自己的元模型-KAYA

KaYa

DDD Kaya MDA MDD 元建模

架构师训练营第二周

M.

嵌入式面试之《Linux系统编程100问》

哒宰的自我修养

Linux 线程 网络编程 进程

Scrapy 源码剖析(二)Scrapy是如何运行起来的?

Kaito

Python 爬虫 Scrapy 源码剖析

Scrapy 源码剖析(三)Scrapy有哪些核心组件?

Kaito

Python 爬虫 Scrapy 源码剖析

积极参与数字货币等国际规则制定,塑造新的竞争优势

CECBC

疫情 经济

架构师训练营第 1 期 -- 第六周学习总结

发酵的死神

极客大学架构师训练营

如何搭建一个爬虫代理服务?

Kaito

爬虫 代理

如何构建一个通用的垂直爬虫平台?

Kaito

Python 爬虫 代理

CICD实战——服务自动测试

TARS基金会

微服务 单元测试 CI/CD

TarsCpp 组件 之 智能指针详解

TARS基金会

c++ 微服务 智能指针 TARS

当AI入职FBI,克格勃直呼内行

脑极体

Java9新特性-上篇

hepingfly

Java Java新特性

【面经】面试官:讲讲类的加载、链接和初始化?

冰河

架构 JVM 类加载 优化 性能调试

2020年区块链行业十大趋势

CECBC

区块链 技术人才

央行数字货币亮相 吹皱一池春水

CECBC

数字货币 银行

2020年9月公有云性能评测:UCloud、腾讯云屈居二三名,冠军竟然是它?

博睿数据

云计算 公有云 评测 排行榜

TarsCpp 组件之 MySQL 操作

TARS基金会

c++ MySQL 数据库 微服务 TARS

甲方日常42

句子

工作 随笔杂谈 日常

架构师训练营第 1 期 -- 第六周作业

发酵的死神

极客大学架构师训练营

美国半导体十年计划中的NO.1,模拟硬件究竟有什么价值?

脑极体

科大讯飞翻译系统变身“随身翻译官” 助力粤港澳大湾区一体化建设

Talk A.I.

有状态软件如何在k8s上快速扩容甚至自动扩容

东风微鸣

Kubernetes DevOps openshift

架构师训练营第六周总结

邓昀垚

极客大学架构师训练营

如何快速打造高稳定千亿级别对象存储平台_QCon_赵健博_InfoQ精选文章