大咖直播-鸿蒙原生开发与智能提效实战!>>> 了解详情
写点什么

浅谈 Kafka Streams 在实时跟踪和监控系统中的应用

  • 2019-08-29
  • 本文字数:632 字

    阅读完需:约 2 分钟

浅谈Kafka Streams在实时跟踪和监控系统中的应用

QCon上海2018大会上,粟海讲师做了《浅谈 Kafka Streams 在实时跟踪和监控系统中的应用》主题演讲,主要内容如下。


演讲简介


结合在 Palo Alto Networks Wildfire 云服务系统开发和运维中的一些痛点,来讲述如何运用流技术来设计和打造一个实时跟踪和监控系统。如何进行技术选型,如何使用流技术(Kafka Streams)来计算和统计基于业务逻辑的系统运行状况,使用 Elasticsearch 来存储数据和查询历史数据,并通过定制化界面以及通用图形报表系统 Grafana 来展示实时统计数据和个体处理单元的跟踪结果。 讨论将来如何通过机器学习技术结合实时跟踪和监控系统来使整个运维系统智能化,减轻运维压力,快速定位和隔离故障节点,保证整体系统的高可用性。


讲师介绍


粟海


PaloAlto Networks 高级研发经理


一名工程师,程序员,新技术的粉丝,喜欢解决问题的人,有自己管理理念的团队带领者,3 个孩子的父亲,爱煮饭的先生。现担任 Palo Alto Networks,高级软件研发经理,毕业于华中科技大学计算机系,美国仁斯里尔理工大学工学硕士。曾担任广东省东江深圳供水工程管理局(现广东粤海集团粤港供水公司)集控中心副主任,信息中心副主任。深圳东深电子技术有限公司研发副总经理。


目前负责 Palo Alto Networks 安全云服务系统 Wildfire 的架构开发。专注于大数据,高并发系统的软件设计和研发。


业余时间热心于在美国硅谷华人社区的公益活动。现任美国北加州华科校友会会长,喜爱跑步和 hiking。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-08-29 12:034341

评论

发布
暂无评论
发现更多内容

【得物技术】浅谈重复http请求的取消

得物技术

方法 HTTP 场景 crud 请求

java拼团小程序源码(毕设)

清风

毕业设计

Python——内置函数----让你偷懒的工具

在即

9月日更

kube-ovn 组网结构

Geek_f24c45

k8s Kube-OVN cni

数字化助力能源高效利用

CECBC

测试九剑之-破箭式

薛飞

自动化测试 测试管理

区块链技术解决信任问题

CECBC

分分合合分分,谷歌医疗走向大败退

脑极体

网卡修改网速和buffer

耳东@Erdong

9月日更 网卡

面对面小程序开源

OpenIM

上线半天下载量破100W!美团大佬的Java性能调优实战手册,超详细

Java 编程 面试 性能调优

坍缩的企业

涛哥 数字产品和业务架构

企业架构

【网络安全】Spring框架漏洞总结(一)

网络安全学海

黑客 网络安全 信息安全 渗透测试 安全漏洞

用诸葛孔明的智慧,读懂新型数据中心的“四新”机遇与产业逻辑

脑极体

Python Qt GUI设计:UI界面可视化组件、属性概述(基础篇—4)

不脱发的程序猿

Python qt GUI设计 PyQt5

MySQL五个常见的高可用方案

hanaper

【SoCC2018论文】DAGOR:微信「大规模微服务过载控制系统」

OpenIM

低代码时代来临,织信Informat携手低码星球探讨「企业数字化转型之路」

优秀

低代码

如何从数据到资产

奔向架构师

数据治理 9月日更

北鲲云超算平台凝聚技术实力,赋能高算力需求行业加速发展

北鲲云

spine动画文件转dragonbones骨骼文件

风翱

9月日更 dragonbones

ebay支付账务系统架构解析之“读”一无二

贾奇 (Jacky)

支付系统 CQRS 读写分离

HTML进阶(二)

Augus

html 9月日更

linux之chattr命令

入门小站

Linux

编程基础:CPU资源监控

正向成长

CPU调度

全球国家简码信息表

入门小站

工具

流媒体:依托于声网的连麦解决方案

声网

音视频 流媒体

GraphQL 快速入门【1】简介

码界行者

Rest graphql

自定义aop实现Cacheable注解(零拷贝), CacheItemGet,CacheMapGet,CacheMapPut

张音乐

Java 缓存 注解 9月日更

大厂敲门砖!P9技术官级别的顶级并发编程宝典,献给想去大厂的你

Java 编程 面试 程序人生 p9

从零到MySQL架构师学习内容整理

hanaper

浅谈Kafka Streams在实时跟踪和监控系统中的应用_QCon_粟海_InfoQ精选文章