写点什么

浅谈 Kafka Streams 在实时跟踪和监控系统中的应用

  • 2019-08-29
  • 本文字数:632 字

    阅读完需:约 2 分钟

浅谈Kafka Streams在实时跟踪和监控系统中的应用

QCon上海2018大会上,粟海讲师做了《浅谈 Kafka Streams 在实时跟踪和监控系统中的应用》主题演讲,主要内容如下。


演讲简介


结合在 Palo Alto Networks Wildfire 云服务系统开发和运维中的一些痛点,来讲述如何运用流技术来设计和打造一个实时跟踪和监控系统。如何进行技术选型,如何使用流技术(Kafka Streams)来计算和统计基于业务逻辑的系统运行状况,使用 Elasticsearch 来存储数据和查询历史数据,并通过定制化界面以及通用图形报表系统 Grafana 来展示实时统计数据和个体处理单元的跟踪结果。 讨论将来如何通过机器学习技术结合实时跟踪和监控系统来使整个运维系统智能化,减轻运维压力,快速定位和隔离故障节点,保证整体系统的高可用性。


讲师介绍


粟海


PaloAlto Networks 高级研发经理


一名工程师,程序员,新技术的粉丝,喜欢解决问题的人,有自己管理理念的团队带领者,3 个孩子的父亲,爱煮饭的先生。现担任 Palo Alto Networks,高级软件研发经理,毕业于华中科技大学计算机系,美国仁斯里尔理工大学工学硕士。曾担任广东省东江深圳供水工程管理局(现广东粤海集团粤港供水公司)集控中心副主任,信息中心副主任。深圳东深电子技术有限公司研发副总经理。


目前负责 Palo Alto Networks 安全云服务系统 Wildfire 的架构开发。专注于大数据,高并发系统的软件设计和研发。


业余时间热心于在美国硅谷华人社区的公益活动。现任美国北加州华科校友会会长,喜爱跑步和 hiking。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-29 12:034354

评论

发布
暂无评论
发现更多内容

JUnit VS TestNG

FunTester

爆肝!阿里大佬自曝10w字Java面试核心知识手册,基础到高级足足涵盖30个技术专题

Java全栈架构师

Java spring 架构 面试 JVM

Android 修改系统屏幕亮度及监听

yechaoa

android 6月月更 Brightness

flutter系列之:flutter中的IndexedStack

程序那些事

flutter 程序那些事 6月月更

uni-app进阶之样式框架/生产环境【day10】

恒山其若陋兮

6月月更

在线JSON转HTMLTable工具

入门小站

工具

vue2升级vue3: 全局变量挂载与类型声明

zhoulujun

vue2升级vue3:webpack vue-loader 打包配置

zhoulujun

vite webpack vue-loader

数据库每日一题---第19天:排名靠前的旅行者

知心宝贝

数据库 前端 后端 云 原生云 CTO 6月月更

SRE Lesson One -- 写给SRE新手的入门手册

耳东@Erdong

SRE SRE Lesson One

【愚公系列】2022年06月 通用职责分配原则(九)-受保护变量原则

愚公搬代码

6月月更

vue2升级vue3: Event Bus 替代方案

zhoulujun

Vue3 vue2 event bus

【网关对比】Java亿级流量架构之网关设计思路

Java全栈架构师

Java 程序员 面试 微服务 架构师

盘点常见的漏洞利用方式

穿过生命散发芬芳

漏洞利用 6月月更

eureka的解析

卢卡多多

Eureka 6月月更

vue2升级vue3:class component的遗憾

zhoulujun

@Options @Component class component

在线文本按行批量反转工具

入门小站

工具

微博关闭发布多个兼职诈骗信息违规账号:如何打击数据造假灰产

石头IT视角

Java Core 「14」J.U.C 线程池-Future & FutureTask

Samson

学习笔记 Java core 6月月更

再次认识 WebAssembly

devpoint

typescript webassembly 6月月更

vue2升级vue3:TypeScript下vuex-module-decorators/vuex-class to vuex4.x

zhoulujun

vuex3

从摄影“鄙视链”说起,聊一聊XDR的安卓化之路

脑极体

阿里出品!图形化的ant脚本——IDEA插件CloudToolkit

Java全栈架构师

Java 阿里巴巴 程序员 IDEA 开发工具

vue2升级vue3:this.$createElement is not a function—动态组件升级

zhoulujun

小程序与工业互联网能够相辅相成的原因

Geek_99967b

小程序 小程序开发

有一说一,高并发系统设计其实一点都不难!

Java全栈架构师

Java 程序员 面试 高并发 架构设计

数据治理的重要性

奔向架构师

数据治理 数据资产 6月月更

必读书籍

玄兴梦影

学习 书籍 推荐书籍

linux几个没用但是有趣的命令

入门小站

Linux

SRE Lesson One -- Day2 熟练使用 Markdown

耳东@Erdong

SRE 6月月更 SRE Lesson One

微服务测试效率治理

阿泽🧸

微服务 6月月更

浅谈Kafka Streams在实时跟踪和监控系统中的应用_QCon_粟海_InfoQ精选文章