写点什么

浅谈 Kafka Streams 在实时跟踪和监控系统中的应用

  • 2019-08-29
  • 本文字数:632 字

    阅读完需:约 2 分钟

浅谈Kafka Streams在实时跟踪和监控系统中的应用

QCon上海2018大会上,粟海讲师做了《浅谈 Kafka Streams 在实时跟踪和监控系统中的应用》主题演讲,主要内容如下。


演讲简介


结合在 Palo Alto Networks Wildfire 云服务系统开发和运维中的一些痛点,来讲述如何运用流技术来设计和打造一个实时跟踪和监控系统。如何进行技术选型,如何使用流技术(Kafka Streams)来计算和统计基于业务逻辑的系统运行状况,使用 Elasticsearch 来存储数据和查询历史数据,并通过定制化界面以及通用图形报表系统 Grafana 来展示实时统计数据和个体处理单元的跟踪结果。 讨论将来如何通过机器学习技术结合实时跟踪和监控系统来使整个运维系统智能化,减轻运维压力,快速定位和隔离故障节点,保证整体系统的高可用性。


讲师介绍


粟海


PaloAlto Networks 高级研发经理


一名工程师,程序员,新技术的粉丝,喜欢解决问题的人,有自己管理理念的团队带领者,3 个孩子的父亲,爱煮饭的先生。现担任 Palo Alto Networks,高级软件研发经理,毕业于华中科技大学计算机系,美国仁斯里尔理工大学工学硕士。曾担任广东省东江深圳供水工程管理局(现广东粤海集团粤港供水公司)集控中心副主任,信息中心副主任。深圳东深电子技术有限公司研发副总经理。


目前负责 Palo Alto Networks 安全云服务系统 Wildfire 的架构开发。专注于大数据,高并发系统的软件设计和研发。


业余时间热心于在美国硅谷华人社区的公益活动。现任美国北加州华科校友会会长,喜爱跑步和 hiking。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-29 12:034036

评论

发布
暂无评论
发现更多内容

MySQL 系列教程之(十)索引原理:B+ 树与索引

若尘

MySQL 数据库 8月日更

博客升级之在线代码编辑器

devpoint

vscode 编辑器 8月日更

你可能不知道的css动画性能

云小梦

CSS layout requestAnimationFrame 重排和重绘 will-change

架构训练营第 1 期 模块五作业

高远

☕【Java技术指南】「并发原理专题」AQS的技术体系之CLH、MCS锁的原理及实现

洛神灬殇

AQS 8月日更 MCS锁 CLH锁

万企明道成立八周年,邀你书写留言!

明道云

从0开始的TypeScriptの十二:装饰器

空城机

JavaScript typescript 大前端 8月日更

前端基础六之jQuery效果

ベ布小禅

8月日更

elasticsearch7.13.4 ik中文分词器安装

Rubble

8月日更

先「干」,就对了

非著名程序员

个人成长 职场 认知提升 8月日更

质量基础设施一站式服务平台搭建,NQI平台搭建

服务发现机制SPI居然是破坏者!

4ye

Java 源码 后端 sping 8月日更

上游思维:谁来为没有发生的事情买单?

石云升

读书笔记 8月日更 上游思维

一文读懂混合型智能合约:如何结合链上与链下计算资源?

CECBC

数字化转型助力构建银行新型产品管理

CECBC

扫码出入登记小程序

清风

小程序

【Vue2.x 源码学习】第四十二篇 - 组件部分 - 组件挂载流程简述

Brave

源码 vue2 8月日更

C++ 中的 Pipeable 编程

hedzr

c++ pipeable

记一次勒索病毒后的应急响应

网络安全学海

黑客 网络安全 信息安全 渗透测试 安全漏洞

探索区块链C端市场 艺术品、卡牌、音乐皆可NFT

CECBC

为什么要选择filecoin矿机挖矿?为什么不直接购买filecoin?

分布式存储 IPFS Filecoin fil挖矿 fil矿机

Go字符串拼接最佳实践

Rayjun

Go 语言

ndk-build 脚本

Changing Lin

8月日更

仿TP钱包开发,去中心化钱包源码开发

Python代码阅读(第15篇):列表求交集

Felix

Python 编程 Code Programing 阅读代码

批量SQL优化实战

码农参上

sql SQL优化 8月日更

【Flutter 专题】61 图解基本 Button 按钮小结 (一)

阿策小和尚

Flutter 小菜 0 基础学习 Flutter Android 小菜鸟 8月日更

Linux 虚拟文件系统(VFS)分析

赖猫

Linux 文件系统

网络攻防学习笔记 Day112

穿过生命散发芬芳

网络安全 8月日更

fil币怎么挖矿?fil挖矿怎么挖?

fil挖矿怎么挖 fil币怎么挖矿

Go,一文搞懂 string 实现原理

微客鸟窝

Go 语言 8月日更

浅谈Kafka Streams在实时跟踪和监控系统中的应用_QCon_粟海_InfoQ精选文章