“AI 技术+人才”如何成为企业增长新引擎?戳此了解>>> 了解详情
写点什么

美团开源实时监控系统 CAT 3.0 发布:多语言客户端及多项性能提升

  • 2018-11-07
  • 本文字数:2200 字

    阅读完需:约 7 分钟

美团开源实时监控系统  CAT 3.0 发布:多语言客户端及多项性能提升

CAT 项目背景

CAT(Central Application Tracking),是美团点评基于 Java 开发的一套开源的分布式实时监控系统。美团点评基础架构部希望在基础存储、高性能通信、大规模在线访问、服务治理、实时监控、容器化及集群智能调度等领域提供业界领先的、统一的解决方案,CAT 目前在美团点评的产品定位是应用层的统一监控组件,在中间件(RPC、数据库、缓存、MQ 等)框架中得到广泛应用,为各业务线提供系统的性能指标、健康状况、实时告警等服务。

本文会对 CAT 的客户端、性能等做详细深入的介绍,更多技术细节,欢迎阅读《深度剖析开源分布式监控 CAT》。

使用 CAT 能:

  • 减少故障发现时间

  • 降低故障定位成本

  • 辅助应用程序优化

CAT 技术优势

  • 实时处理:信息的价值会随时间锐减,尤其是在事故处理过程中

  • 全量数据:全量采集指标数据,便于深度分析故障案例

  • 高可用:故障的还原与问题定位,需要高可用监控来支撑

  • 故障容忍:故障不影响业务正常运转、对业务透明

  • 高吞吐:海量监控数据的收集,需要高吞吐能力做保证

  • 可扩展:支持分布式、跨 IDC 部署,横向扩展的监控系统

CAT 使用现状

目前,CAT 已经覆盖了美团点评的外卖、酒旅、出行、金融等核心业务线,几乎已经接入美团点评的所有核心应用,并在生产环境中大规模地得到使用。

2016 年初至今,CAT 接入的应用增加了 400%,机器数增加了 900%,每天处理的消息总量高达 3200 亿,存储消息量近 400TB,高峰期集群 QPS 达 650 万 / 秒。

面对流量的成倍增长,CAT 在通信、计算、存储方面都遇到了前所未有的挑战。整个系统架构也经历了一系列的升级和改造,包括消息采样聚合、消息存储、业务多维度指标监控、统一告警等等,项目最终稳定落地。为公司未来几年内业务流量的稳定增长,打下了坚定的基石。

经过 7 年的持续建设,CAT 也在不断发展,我们也希望更好的回馈社区,将 CAT 提供的服务惠及更多的外部公司。我们今年将对开源版本进行较大的迭代与更新,未来也会持续把公司内部一些比较好的实践推广出去,欢迎大家跟我们一起共建这个开源社区。

新版特性

CAT 3.0.0 Release Notes

多语言客户端

随着业务的不断发展,很多产品和应用需要使用不同的语言,CAT 多语言客户端需求日益增多,除 Java 客户端外,目前提供了 C/C++、Python、Node.js、Golang 客户端,基本覆盖了主流的开发语言。对于多语言客户端,核心设计目标是利用 C 客户端提供核心 API 接口作为底层基石,封装其他语言 SDK。

目前支持的主流语言使用指南:

  • Java

  • C/C++

  • Python

  • Node.js

  • Golang

性能提升

消息采样聚合

消息采样聚合在客户端应对大流量时起到了至关重要的作用,当采样命中或者内存队列已满时都会经过采样聚合上报。采样聚合是对消息树拆分归类,利用本地内存做分类统计,将聚合之后的数据进行上报,减少客户端的消息量以及降低网络开销。

通信协议优化

CAT 客户端与服务端通信协议由自定义文本协议升级为自定义二进制协议,在大规模数据实时处理场景下性能提升显著。目前服务端同时支持两种版本的通信协议,向下兼容旧版客户端。

测试环境:CentOS 6.5,4C8G 虚拟机
测试结果:新版相比旧版,序列化耗时降低约 3 倍

消息文件存储

新版消息文件存储进行了重新设计,解决旧版本的文件存储索引、数据文件节点过多以及随机 IO 恶化的问题。

新版消息文件存储为了同时兼顾读写性能,引入了二级索引存储方案,对同一个应用的 IP 节点进行合并,并且保证一定的顺序存储。下图是索引结构的最小单元,每个索引文件由若干个最小单元组成。每个单元分为 4 * 1024 个桶,第一个桶作为我们的一级索引 Header,存储 IP、消息序列号与分桶的映射信息。剩余 4 * 1024 - 1 个桶作为二级索引,存储消息的地址。

新版消息文件存储文件节点数与应用数量成正比,有效减少随机 IO,消息实时存储的性能提升显著。以下为美团点评内部 CAT 线上环境单机消息存储的数据对比:

未来规划

技术栈升级

拥抱主流技术栈,降低学习和开发成本,使用开源社区主流技术工具(Spring、Mybatis 等),建设下一代开源产品。

产品体验

对产品、交互进行全新设计,提升用户体验。

开源社区建设

产品官网建设、组织技术交流。

更多语言 SDK

关于开源

GitHub 连接

CAT 自 2011 年开源以来,Github 收获 5900+ Star,2400+ Forks,被 100+ 公司企业使用,其中不乏携程、陆金所、猎聘网、平安等业内知名公司。在每年全球 QCon 大会、全球架构与运维技术峰会等都有持续的技术输出,受到行业内认可,越来越多的企业伙伴加入了 CAT 的开源建设工作,为 CAT 的成长贡献了巨大的力量。

美团点评基础架构部负责人黄斌强表示,在过去四年中,美团点评在架构中间件领域有比较多的积累沉淀,很多系统服务都经历过大规模线上业务实际运营的检验。我们在使用业界较多开源产品的同时,也希望能把积累的技术开源出去,一方面是回馈社区,贡献给整个行业生态;另一方面,让更多感兴趣的开发工程师也能参与进来,共同加速系统软件的升级与创新。所以,像 CAT 这样的优秀项目,我们将陆续开源输出并长期持续运营,保证开源软件本身的成熟度、支撑度与社区的活跃度,也欢迎大家给我们提出更多的宝贵意见和建议。

结语

这是一场没有终点的长跑,我们整个 CAT 项目组将长期有耐心地不断前行。愿同行的朋友积极参与我们,关注我们,共同打造一款企业级高可用、高可靠的分布式监控中间件产品,共同描绘 CAT 的新未来!

这次开源仅仅是一个新的起点,如果你对 CAT 新版本有一些看法以及建议,欢迎联系我们:cat@dianping.com 或 Github issues

2018-11-07 18:402068
用户头像
张婵 InfoQ 技术编辑

发布了 87 篇内容, 共 51.4 次阅读, 收获喜欢 218 次。

关注

评论 2 条评论

发布
用户头像
提个小问题,最后的github issues的链接不对
2018-11-09 14:46
回复
没有更多了
发现更多内容

Java开发不会Redis?Java开发掌握好Redis在面试中是个大加分项。

Java架构之路

Java 程序员 架构 面试 编程语言

Elasticsearch Document 的 _version 元数据

escray

elastic 七日更 28天写作 死磕Elasticsearch 60天通过Elastic认证考试

解密阿里线上问题诊断工具Arthas和jvm-sandbox

比伯

Java 编程 架构 面试 计算机

2020出行之变(二):新能源汽车的拥挤牌桌

脑极体

第九周 性能优化(三) 作业 「架构师训练营 3 期」

胡云飞

学设计模式前先了解下设计模式分类

爱笑的小雨

设计模式

Java 程序经验小结:编程更好的使用泛型以替代原生态类型

后台技术汇

28天写作

一顿午饭的现实思考

石君

28天写作 择业

28天瞎写的第二百二十七天:跨年夜的故事

树上

28天写作

第九周命题作业

cc

如果公司要招一个人代替你

哈撒啦岛

产品经理训练营

登录微软账号的Windows电脑如何远程?

BigYoung

微软 Windows 10 远程登录

html容器以及CSS概述

程序员的时光

程序员 七日更 28天写作

项目管理系列(9)- 从 0 到 1 搭建 PMO(二)

Ian哥

28天写作

宝马等支持为车辆创建“出生证明” 利用区块链技术跟踪车辆历史

CECBC

宝马

产品经理训练营笔记-产品思维和产品意识(上)

.nil?

产品经理训练营

GNUCash

lidaobing

GNUCash 28天写作 四柱结算法 复式记账

第九周学习心得

cc

小喜量化炒币机器人系统开发|小喜量化炒币机器人APP软件开发

系统开发

区块链技术解决监管痛点 首批6家券商加入“中证链”节点

CECBC

区块链

张小龙:视频号是什么?| 视频号 28 天 (16)

赵新龙

28天写作

认识产品经理-产品JD作业

Weiyung

备战金三银四,Java程序员看完这十本Java进阶必备书籍,薪资能涨20K

Java架构之路

Java 程序员 架构 面试 编程语言

架构师训练营第九周课后作业

万有引力

2021最新总结一个90后 双非本末 5面蚂蚁 如何拿到年薪60W+?

比伯

Java 编程 程序员 架构 面试

【并发编程的艺术】详解指令重排序与数据依赖

程序员架构进阶

架构 并发 Java内存模型 28天写作

重学JS | 通过无限循环动画案例理解CSS3动画与JS动画

梁龙先森

面试 大前端 编程语言 28天写作

四个策略,三个“坑”,读《架构师也不写代码》有感

李忠良

28天写作

金融 真的需要区块链技术提升效率吗?

CECBC

金融

核酸检测:让我明白AQS原理

叫练

AQS 共享锁 独占锁 可中断 条件队列

Spring Boot 中集成 Shiro

武哥聊编程

Java springboot SpringBoot 2 shiro 28天写作

美团开源实时监控系统  CAT 3.0 发布:多语言客户端及多项性能提升_DevOps & 平台工程_覃云_InfoQ精选文章