写点什么

Project Pravega ---- 支持 streaming 和实时分析的存储平台

  • 2019-09-03
  • 本文字数:708 字

    阅读完需:约 2 分钟

Project Pravega ----支持streaming和实时分析的存储平台

QCon上海2018大会上,滕昱讲师做了《Project Pravega ----支持 streaming 和实时分析的存储平台》主题演讲,主要内容如下。


演讲简介


Project Pravega 是 DELLEMC 设计并开源的用来支持实时流数据和分析的存储平台,支持存储无限的数据流并同时满足企业用户对数据持久性严格要求的产品。


Pravega 会作为 DELLEMC 给 IoT 产业提供的端到端解决方案中流存储的部分出现,另外在整个解决方案也包括流行的 stream processors, 例如 Apache Flink and Apache Spark,也包括 DELLEMC 已经发布的企业级分布式文件和对象存储平台。


Pravega 有如下特性:


  • 精确的一次性语义支持(Exactly Once schematic)

  • 业务自动伸缩支持(Auto scaling)

  • 分布式计算原语(Distributed Computing Primitive)

  • 高效的写性能(Write Efficiency)

  • 无限数据存储能力(Unlimited Retention)

  • 数据安全和持久性的支持(Durability)

  • 事务支持(Transaction Support)

听众受益

  • 了解 streaming 系统和实时分析平台的 use case 和现阶段的 solution/Architecture 的局限性

  • 了解 Project Pravega 是如何从架构上解决这些局限性

  • 分布式系统中 Exactly Once/ Transaction Support/ Auto scaling 是如何设计实现的


讲师介绍


滕昱


Dell EMC 软件开发总监


滕昱,目前就职于 DELL EMC 非结构化数据存储部门(Unstructured Data Storage) 团队并担任软件开发总监。2007 年加入 DELLEMC 以后一直专注于分布式企业云存储产品和 service 领域。先后参加并领导了中国研发团队参与两代 DELLEMC 对象存储产品的研发工作并取得商业上成功。


从 2016 年开始,兼任 Streaming 存储和实时分析系统的设计开发工作。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-09-03 15:102425

评论

发布
暂无评论
发现更多内容

多个平台显示IP属地,必须大力推行互联网实名制

石头IT视角

Discourse 清理存储空间的方法

HoneyMoose

长达四年的减肥记录

Amazing_eve

#开源

学生管理系统架构设计

张立奎

Android条件控制宏编译

桑榆

8月月更

头脑风暴:完全背包

HelloWorld杰少

8月月更

开源一夏|OpenHarmony如何查询设备类型(eTS)

坚果

开源 HarmonyOS OpenHarmony 8月月更

手写分布式配置中心(1)

分享干货的你

java; spring-boot SpringCould 签约计划第三季

【LeetCode】最大层内元素和Java题解

Albert

LeetCode 8月月更

Axure9基本交互操作(一)

乔乔

8月月更

七日算法先导(三)—— 快速排序,插入排序

工程师日月

8月月更

git操作

Jason199

git 8月月更

《MySQL入门很轻松》第2章:MySQL管理工具介绍

乌龟哥哥

8月月更

区块链或者智能合约开发的 5 种最佳编程语言

devpoint

区块链 以太坊 8月月更

开源一夏 | 云服务器ECS安装Mysql、JDK、RocketMQ

六月的雨在InfoQ

开源 8月月更

前端常考react相关面试题(一)

helloworld1024fd

React

动态内存开辟(C语言)

孤衫

编程语言 C语言 动态内存 8月月更

【python小游戏】用python写一款小游戏--贪吃蛇

BROKEN

8月日更 8月月更

那些年,在Linux指令上踩过的坑~

芒果酱

Linux 签约计划第三季

Nacos配置中心之客户端长轮询

急需上岸的小谢

8月月更

Go 语言快速入门指南:什么是 TLS 安全传输层协议

宇宙之一粟

安全 Go 语言 8月月更

工业物联网 —— 新型数据库的召唤

CnosDB

IoT 时序数据库 开源社区 CnosDB infra

开源一夏 | 基于若依springboot架构实现数据多维统计

六月的雨在InfoQ

开源 8月月更

SRv6网络的安全解决方案

穿过生命散发芬芳

8月月更 SRv6

Service Mesh落地路径

阿泽🧸

Service Mesh 8月月更

【数据挖掘概论】数据挖掘的简单描述

晴天

8月月更

克服项目管理中恐惧心理

踏雪痕

项目管理 8月月更

python绘制一个时间的七段数码管实例基本的七段数码管绘制

BROKEN

8月日更 8月月更

C++对象的初始化和清理之构造函数和析构函数分析与实例(一)

CtrlX

c++ 面向对象 后端 代码 8月月更

2022前端秋招vue面试题

helloworld1024fd

Vue

手写柯里化 - toString 理解

掘金安东尼

JavaScript 前端 函数式 8月月更

Project Pravega ----支持streaming和实时分析的存储平台_QCon_滕昱_InfoQ精选文章