写点什么

你真了解实时大数据?高手们如何玩转开源流计算?

  • 2018-08-27
  • 本文字数:1488 字

    阅读完需:约 5 分钟

9 月,一场热闹非凡的技术盛宴——2018 实时大数据 Meetup 要来啦!

最近两年,实时大数据快速发展,流式 SQL、在线机器学习、流式大数据查询、SQL 复杂时间处理(CEP SQL)、时空数据分析(Time GeoSpatial)与处理等高大上特性迅速成长起来,并扎根于科技金融、车联网、物联网、电商、智慧城市等应用场景,创造新的价值。

毋庸置疑,数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷。并且当下,从数据产生到分析结果的计算,数据时效性对业务的蓬勃发展起到更至关重要的作用。在面向毫秒的实时大数据计算场景上,Spark 和 Flink 各有所长。

而针对当前大数据领域分析场景需求各异而导致的存储冗余问题,Apache CarbonData 则提供了一种新的融合数据存储方案,以一份数据同时支持快速过滤查找和各种大数据离线分析和实时分析。目前,CarbonData 已在 20+ 企业生产环境上部署应用。

因此,本次 Meetup 将深度解析大数据实时流计算两大引擎 Apache Spark(Structured Streaming) 、Apache Flink 和社区新贵 Apache CarbonData 技术与实践,并将融合实时的数据存储方案。这些来自于开源社区和一线企业的实践经验,将带给大家关于实时大数据技术的更多落地思考。

插入主视觉图

本次 Meetup 将开设为期一整天的演讲 + 动手实训活动,并集合了 Databricks、华为云及美团的大咖级嘉宾。他们的集体「授业解惑」一定能帮你更好地进阶 Spark、Flink 及 CarbonData 开发,用更开放的视角实操大数据实时流计算。

这场技术盛宴已开启限额免费报名通道!

上午场 Meetup 演讲嘉宾

本次 Meetup 汇聚了实时大数据领域优秀的工程师、分析师、代码贡献者及一线实践者。

这些嘉宾包括 Databricks 工程师及 Spark Structured Streaming 项目带头人 Tathagata Das、华为云相关专家、美团点评专家,他们长期活跃在 Apache 开源社区,并担任 PMC 和 Committer 关键技术角色。

其中,作为 Spark Structured Streaming 的主要开发人员,Tathagata Das 将从推动者的视角分享 Spark Structured Streaming 当前的一些进展,为工程师们基于其特性更好地开发提供成熟思路。其他三位业内大牛讲师,也将带来他们对 Spark、Flink 及 CarbonData 的技术观察和最佳实践分享。

演讲话题

  • Easy, Scalable, Fault-Tolerant Stream Processing with Structured Streaming in Apache Spark
  • What's New in Apache CarbonData 1.5
  • 美团点评 Flink 实践与应用
  • 智能流计算:Flink/Spark 在 CloudStream 中的应用实践

(点击「阅读原文」,查看所有演讲嘉宾及演讲议题摘要)

活动日程 & 报名方式

时间:9 月 8 日全天(上午场 Meetup+ 下午场 Workshop)

地点:北京·车库咖啡

长按上方二维码扫码,或点击文末阅读原文,一键直达报名窗口 :-)

敲黑板!此次活动将全!程!免!费!,报名人满即通道关闭,请尽快预约席位!

下午场 Workshop 预告

本次下午场 Workshop 将设置三大环节:

  • 第一环节DEMO 演示:基于 Spark+CarbonData 完成各种大数据分析(实时数据查询、多维过滤查询,多维统计分析等)。
  • 第二环节将由参加者基于指定命题,完成实时流计算分析典型场景实践;参与者还可以现场完成自己设计的实时计算作业。
  • 第三环节为自由讨论,相关专家将现场解答大家实际操作中的问题。

报名或咨询下午场 Workshop的伙伴们,请加本次活动小助手微信 ID:geekbang111(备注:meetup),获得报名链接及更多信息!

惊喜礼物

报名参会且到场的朋友们均可获得 2018 实时大数据 Meetup 限量版 T 恤一件,以及其他惊喜礼品。进一步参与下午场 Workshop 活动,还可以收集更多惊喜小礼物,保证满载而归!

2018-08-27 19:002776
用户头像
Cherry倩芸 InfoQ高级策划编辑

发布了 51 篇内容, 共 21.6 次阅读, 收获喜欢 34 次。

关注

评论

发布
暂无评论
发现更多内容

深入理解 Flutter 图片加载原理 | 京东云技术团队

京东科技开发者

flutter 移动开发 图片懒加载 企业号 8 月 PK 榜

ARM64是什么意思?与x86有什么区别?

行云管家

arm64

关于跨国文件传输需要了解的5点

镭速

跨国文件传输

GitHub登顶的 Java 面试八股文(2023金九银十最新)附答案详解

架构师之道

程序员 java面试

软件测试丨Chrome 115之后的版本,如何更新driver?

测试人

chrome 程序员 软件测试 自动化测试 chromedriver

电商小程序微服务架构

艾瑾行

架构训练营

晋级名单公布!“域见杯”复赛今日火热开启

华为云开发者联盟

人工智能 华为云 华为云开发者联盟 企业号 8 月 PK 榜

十问Huawei Cloud Toolkit:开发插件如何提升云上开发效能

华为云开发者联盟

ide 开发 华为云 华为云开发者联盟 企业号 8 月 PK 榜

小白都会的数据可视化大屏搭建,速来学习

华为云开发者联盟

开发 开发工具 华为云 华为云开发者联盟 企业号 8 月 PK 榜

透彻理解 Axios Blob 的使用与优化

Apifox

性能优化 后端 HTTP API web开发

chatglm2-6b模型在9n-triton中部署并集成至langchain实践 | 京东云技术团队

京东科技开发者

人工智能 #LangChain langchain 企业号 8 月 PK 榜 ChatGLM2-6B

大容量文件传输的高速传输协议解决方案评估与比较

镭速

大文件传输 大容量文件传输

数仓备份经验分享丨详解roach备份原理及问题处理套路

华为云开发者联盟

数据库 后端 华为云 华为云开发者联盟 企业号 8 月 PK 榜

AI 自动开发软件并部署到云服务器,DevOpsGPT实现从自然语言需求到可运行的软件!

booboosui

AI Codec AI开发软件 ChatGPT

08.25北京站|阿里云Serverless 技术实践营( AI 专场)开放报名

Serverless Devs

阿里云 Serverless 云原生

利用CI机制管控jar依赖树 | 京东云技术团队

京东科技开发者

ci CI/CD jar包 企业号 8 月 PK 榜

RPA+智能问答实现微信端智能客服 | 京东云技术团队

京东科技开发者

微信 RPA 智能客服 企业号 8 月 PK 榜

OTP令牌是什么?有什么作用?是怎么实现的?

行云管家

运维 堡垒机 双因子认证 OTP令牌

低代码实现探索(五十九)SAP底层技术研究

零道云-混合式低代码平台

食品包装MES系统解决方案

万界星空科技

MES系统

快手光合大会公开全模态大模型AIGC解决方案 人机协同助力创作全流程提效

Geek老T

AI 短视频

火山引擎ByteHouse:一套方案,让OLAP引擎在精准投放场景更高效

字节跳动数据平台

大数据 云原生 Clickhouse 企业号 8 月 PK 榜

LED小间距屏幕的COB封装技术应用和优势

Dylan

技术 封装 PCB LED显示屏

如何用树莓派Pico针对IoT编程?

高端章鱼哥

树莓派 物联网 树莓派 Pico MCU

Parallels Desktop 18 for Mac(Pd虚拟机) 18.3.2激活版

mac

Parallels Desktop 18 pd 18 pd虚拟机 苹果mac Windows软件

你可以信任由编译器优化的代码吗?

互联网工科生

编译器 simd 数据流

ABAQUS正版授权软件怎么下载?达索中国代理商思茂信息

思茂信息

abaqus abaqus软件 有限元仿真技术 有限元分析 结构仿真

开源XL-LightHouse与Flink、ClickHouse之类技术相比有什么优势

feng

大数据 flink Clickhouse 流式计算 流式统计

前端合成海报并保存到本地

南城FE

JavaScript 小程序 前端 图片合成

你真了解实时大数据?高手们如何玩转开源流计算?_大数据_Cherry倩芸_InfoQ精选文章