写点什么

Project Pravega ---- 支持 streaming 和实时分析的存储平台

  • 2019-09-03
  • 本文字数:708 字

    阅读完需:约 2 分钟

Project Pravega ----支持streaming和实时分析的存储平台

QCon上海2018大会上,滕昱讲师做了《Project Pravega ----支持 streaming 和实时分析的存储平台》主题演讲,主要内容如下。


演讲简介


Project Pravega 是 DELLEMC 设计并开源的用来支持实时流数据和分析的存储平台,支持存储无限的数据流并同时满足企业用户对数据持久性严格要求的产品。


Pravega 会作为 DELLEMC 给 IoT 产业提供的端到端解决方案中流存储的部分出现,另外在整个解决方案也包括流行的 stream processors, 例如 Apache Flink and Apache Spark,也包括 DELLEMC 已经发布的企业级分布式文件和对象存储平台。


Pravega 有如下特性:


  • 精确的一次性语义支持(Exactly Once schematic)

  • 业务自动伸缩支持(Auto scaling)

  • 分布式计算原语(Distributed Computing Primitive)

  • 高效的写性能(Write Efficiency)

  • 无限数据存储能力(Unlimited Retention)

  • 数据安全和持久性的支持(Durability)

  • 事务支持(Transaction Support)

听众受益

  • 了解 streaming 系统和实时分析平台的 use case 和现阶段的 solution/Architecture 的局限性

  • 了解 Project Pravega 是如何从架构上解决这些局限性

  • 分布式系统中 Exactly Once/ Transaction Support/ Auto scaling 是如何设计实现的


讲师介绍


滕昱


Dell EMC 软件开发总监


滕昱,目前就职于 DELL EMC 非结构化数据存储部门(Unstructured Data Storage) 团队并担任软件开发总监。2007 年加入 DELLEMC 以后一直专注于分布式企业云存储产品和 service 领域。先后参加并领导了中国研发团队参与两代 DELLEMC 对象存储产品的研发工作并取得商业上成功。


从 2016 年开始,兼任 Streaming 存储和实时分析系统的设计开发工作。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-09-03 15:102332

评论

发布
暂无评论
发现更多内容

远程踏勘系统(源码+文档+部署+讲解)

深圳亥时科技

50亿美元亏损背后:解析生成式 AI 的商业模式之争

Baihai IDP

程序员 AI 白海科技 LLMs GenAI

笔记 20240604

Geek_d01095

Spring Cloud Gateway

你知道什么是IP地址全生命周期吗?

郑州埃文科技

IP

FabFilter Total Bundle 2024 for Mac全套音频插件包

Mac相关知识分享

音频插件包

低代码平台如何通过AI赋能,实现更智能的业务自动化?

天津汇柏科技有限公司

低代码 AI 人工智能

亚马逊云科技宣布为 Amazon ElastiCache 提供预留节点灵活性

伊克罗德信息科技

Parallels Toolbox for mac(工具箱合集)

Mac相关知识分享

笔记 20240524

Geek_d01095

camunda

笔记 20240615

Geek_d01095

RocketMQ

了解一下,CST软件的TLM求解器

思茂信息

仿真软件 cst使用教程 电磁仿真

掌握数据,赢得市场 —— 淘宝商品详情API让电商运营更精准

技术冰糖葫芦

API 接口 API 测试 API 策略 pinduoduo API

笔记 20240530

Geek_d01095

RocketMQ

笔记 20240611

Geek_d01095

Elastic Search

创新+1+1+1+1!筑牢算力底座,助推AI产业繁荣发展!

天翼云开发者社区

云计算 云原生

让你的 Mac 用上最美的屏保,Aerial 使用教程

Rose

Flink 实时湖仓,为汽车行业数字化加速!

阿里云大数据AI技术

大数据 flink 车联网 实时计算

Mac怎么创建txt文件?如何设置新建txt的快捷键?

Rose

淘宝1688跨境电商API接口接入指南:跨境卖家必备知识

代码忍者

pinduoduo API

仓储管理系统-综合管理(源码+文档+部署+讲解)

深圳亥时科技

开源赋能开发者:基于 ASF 开源生态构建云原生时序数据库

Greptime 格睿科技

开源 云原生 时序数据库 数据管理

释放时序数据活力:Greptime 边云一体解决方案白皮书发布!

Greptime 格睿科技

数据库 开源 数据分析 物联网 边云一体

枫清·天枢多模态智能引擎 V2.1.2 版本正式发布!

Fabarta

图数据库 #人工智能 #大模型 多模态数据库

强大的音量控制软件Sound Control for Mac

Mac相关知识分享

音量控制软件

简洁至上——探索产品与技术的优雅原则

京东科技开发者

JavaScript 与 Rust 和 WebAssembly 集成

京东科技开发者

数据资产也能入表?企业将迎来哪些变革?

郑州埃文科技

数据 数据资产入表

强大的创意图像编辑软件Luminar Neo for mac

Mac相关知识分享

谈一谈 Netty 的内存管理 —— 且看 Netty 如何实现 Java 版的 Jemalloc

bin的技术小屋

Netty 内存管理 netty jemalloc管理器 Java.

Agisoft Metashape Professional for mac(三维建模重建软件)

Mac相关知识分享

工具分享丨数据闪回工具MyFlash

GreatSQL

Project Pravega ----支持streaming和实时分析的存储平台_QCon_滕昱_InfoQ精选文章