速来报名!AICon北京站鸿蒙专场~ 了解详情
写点什么

Flink 流批一体的技术架构以及在阿里的实践

  • 2019-08-03
  • 本文字数:619 字

    阅读完需:约 2 分钟

Flink 流批一体的技术架构以及在阿里的实践

在 QCon 北京 2019 大会上,杨克特(鲁尼)讲师做了《Flink 流批一体的技术架构以及在阿里的实践》主题演讲,主要内容如下。


演讲简介


Apache Flink 在诞生之初就确立了使用同一个引擎支持多种计算形态的目标,包括流计算,批处理和机器学习等等。阿里巴巴在选择 Flink 作为新一代大数据引擎时也坚定不移的在贯彻这一目标。在我们的内部版本 Blink 中,我们使用了 SQL 作为流批一体的统一入口,并且在流计算和批处理上都做了大量的优化。流批一体也开始真正的发挥出了价值,在我们的搜索离线数据处理和机器学习平台上均获得了较好的效果。本演讲将分享 Blink 针对流批一体化的场景做了哪些优化,在支持实际业务上碰到了哪些问题,我们又是怎么解决的。

听众受益

  1. 了解 Flink SQL 的技术栈和未来的方向;

  2. 流批一体化如何在业务中产生实际价值;

  3. 流批一体化面临的业务挑战和我们是如何解决的。


讲师介绍


杨克特(鲁尼)


阿里巴巴 高级技术专家


杨克特,阿里花名“鲁尼”,高级技术专家,2011 年于浙江大学硕士毕业。在加入阿里巴巴后,先是从事搜索引擎相关系统的开发,包括搜索引擎后台,新索引的设计和优化,以及调度系统的设计和研发。在转入大数据相关领域后,先后负责过基于 HBase 的实时增量系统,基于 Druid 的 OLAP 分析系统以及 Blink SQL 的优化和开发。在开源领域,杨克特是 Apache Flink 的 Committer,同时也是 Apache Druid (incubating)的 Committer。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/beijing/schedule


2019-08-03 08:006725

评论

发布
暂无评论
发现更多内容

架构训练营 - 模块七

Geek_9de3de

架构实战营

聊聊 Kafka: Producer 的网络模型

老周聊架构

签约计划第二季

Linux之pwd命令

入门小站

Linux

HubSpot company数据在UI上的展示和通过API方式进行获取

汪子熙

Cloud 28天写作 SAP 12月日更

Tracking & Being

mtfelix

28天写作

给弟弟的信第10封|但行好事,莫问前程

大菠萝

28天写作

架构训练营 -- 模块二

LJK

架构训练营

测试敏捷化 vs 敏捷测试

BY林子

敏捷测试 测试敏捷化

小程序开通cms可视化网页后台

坚果

小程序 28天写作 12月日更

❤️使用 HTML、CSS 和 JavaScript 的简单模拟时钟❤️

海拥(haiyong.site)

JavaScript 大前端 28天写作 签约计划第二季 12月日更

拿它们练Python爬虫,是在法律边缘试探吗?爬虫圈香饽饽之视频网站的评论区采集

梦想橡皮擦

12月日更

模块6作业

Geek_cb2b43

040022-week6-design

InfoQ_70156470130f

初探.net core微服务架构

为自己带盐

Consul dotnet 28天写作 12月日更

Dubbo框架学习笔记一

风翱

dubbo 12月日更

Vue进阶(幺贰玖):初探 Vue3

No Silver Bullet

Vue3 12月日更

电商系统设计

michael

#架构实战营

架构实战营总结

michael

#架构实战营

【Java技术开发专题】系列之「Guava RateLimiter」针对于限流器的入门到实战(含源码分析介绍)

洛神灬殇

ratelimiter Guava 限流器 RateLimit 12月日更

电商秒杀架构设计

George

模块六作业:拆分电商系统为微服务

危险游戏

架构实战营

dart系列之:如丝滑般柔顺,操作文件和目录

程序那些事

flutter io dart 程序那些事 12月日更

EasyRecovery如何恢复虚拟建模软件的数据文件

淋雨

EasyRecovery

模块八作业

bob

「架构实战营」

Javascript实现一个Module

Jeannette

微信朋友圈高性能复杂度分析

drizzle

「架构实战营」

Go+ HTTP 服务器教程(5.2)

liuzhen007

28天写作 12月日更

在线JSON转jsdoc工具

入门小站

工具

架构学习总结

George

从0开始设计Twitter系统架构

俞凡

twitter 架构 微服务 大厂实践

聊聊 Kafka:Producer Metadata 读取与更新机制

老周聊架构

云原生 Apache Pulsar 签约计划第二季 2月月更

Flink 流批一体的技术架构以及在阿里的实践_数据库_杨克特(鲁尼)_InfoQ精选文章