写点什么

Apache Kudu 在网易实时数仓的实践

  • 2019-09-26
  • 本文字数:540 字

    阅读完需:约 2 分钟

Apache Kudu在网易实时数仓的实践

Kudu 作为一款新型的 OLAP 存储引擎,它的实时入库和支持更新、删除操作的优点,是对开源大数据生态短板有力的补充,达到“Fast Analytics on Fast Data”的效果。基于此,我们把 Kudu 深度集成进了网易猛犸大数据平台,用来支持网易考拉和网易云音乐的数据中台建设,并构建起了各自的实时数据仓库。同时,我们积极参与 Kudu 社区的工作,开发新功能(包括各种优化)并提交到社区,推动项目的发展。


网易杭州研究院数据科学中心软件工程师何李夫老师将在ArchSummit全球架构师峰会(北京站)2019为我们带来《Apache Kudu在网易实时数仓的实践》的精彩分享。


演讲提纲


  1. 系统概述:Kudu 系统介绍;

  2. 使用场景:Kudu 在网易实时数仓建设中的使用案例;

  3. 经验分享:分享运维过程中的一些经验总结。


听众受益


  1. 使听众了解到 Kudu 项目的定位和技术背景;

  2. 使听众了解到 Kudu 在网易实时数仓建设中的实践经验。


嘉宾介绍


何李夫,网易杭州研究院数据科学中心软件工程师,Apache Kudu 项目 Committer & PMC,拥有多年后台高性能服务端系统设计、开发经验,曾负责网易云分布式缓存系统,现负责网易猛犸大数据平台数据仓库存储引擎开发工作。


更多实时计算的平台化实践的相关分享请访问 ArchSummit全球架构师峰会(北京站)2019官网。


https://archsummit.infoq.cn/2019/beijing/


2019-09-26 13:542119

评论

发布
暂无评论
发现更多内容

Kafka架构介绍

架构精进之路

kafka 七日更 28天写作 2月春节不断更

5步教你将MRS数据导入DWS

华为云开发者联盟

数据 MRS GaussDB 集群 DWS

十倍效率背后的管理逻辑

Ian哥

28天写作

让我们与内心聊聊,寻找一段思考发展之路。

叶小鍵

Kubernetes安装篇(下):基于Kubeadm方式的集群部署

xcbeyond

Kubernetes kubeadm 部署 28天写作 Kubernetes从入门到精通

程序员成长第三篇:好的代码和好的工程师

石云升

28天写作 2月春节不断更 工程师等级

探索语言交互技术在政务数字化的应用

华为云开发者联盟

语音 政务 语言交互 VUI G2c

驱动力读书笔记之三

张老蔫

28天写作

信任从对自己诚实开始

Justin

心理学 信任 28天写作

区块链终将彻底改变医疗行业,但哪些因素制约当前的采用?

CECBC

区块链

统一数据管理工具——CloudQuery v1.3.3 上线!

BinTools图尔兹

数据库 运维 开发工具 dba 数据库管理工具

速看!教育上云 让学习战“疫”两不误

教育云

面试官:请讲一下Redis主从复制的功能及实现原理

华为云开发者联盟

redis 数据 节点 redis哨兵 主从复制

为您收录的操作系统系列 - 进程管理(中篇)

鲁米

操作系统 进程 同步

RocketMQ-Spring 毕业两周年,为什么能成为 Spring 生态中最受欢迎的 messaging 实现?

阿里巴巴云原生

Docker 容器 微服务 云原生 API

回顾与总结 | 视频号28天(28)

赵新龙

28天写作

人员培养,不是捷径的捷径(下)

一笑

管理 人才培养 28天写作

【JS】异常处理

德育处主任

JavaScript 大前端 js 28天写作 2月春节不断更

Elasticsearch Bulk API 奇特的 JSON 格式

escray

七日更 28天写作 死磕Elasticsearch 60天通过Elastic认证考试 2月春节不断更

Spring Boot Admin 集成诊断利器 Arthas 实践

阿里巴巴云原生

Java Docker 容器 云原生 Arthas

你会在车里唱K吗? (28天写作 Day27/28)

mtfelix

28天写作 智能汽车 MaaS 出行方案

Mybatis【18】-- Mybatis自关联多对一查询方式

秦怀杂货店

mybatis

口碑销量双爆的数据分析丛书再添新成员!

博文视点Broadview

Elasticsearch+Fluentd+Kafka搭建日志系统

远鹏

kafka ELK EFK Fluentd 日志系统

一个合格的初级前端工程师需要掌握的模块笔记

我是哪吒

程序员 面试 Vue 大前端 2月春节不断更

如果生命的长度可以被改写「幻想短篇 27/28」

道伟

28天写作

Spark Shuffle 内部机制(一)

hanke

大数据 spark 开源

机器学习笔记之:Addition and Scalar Multiplication

Nydia

SpringIOC的注解开发

小马哥

Java spring 七日更

Webpack | 如何提升构建速度,进行体积优化?

梁龙先森

大前端 webpack 28天写作 2月春节不断更

区块链+电力,又擦出什么新火花?

CECBC

区块链

Apache Kudu在网易实时数仓的实践_ArchSummit_何李夫_InfoQ精选文章