2025上半年,最新 AI实践都在这!20+ 应用案例,任听一场议题就值回票价 了解详情
写点什么

Netflix Log4J 优化大规模日志记录

  • 2012-12-10
  • 本文字数:785 字

    阅读完需:约 3 分钟

经过 Netflix 内部优化的 log4j 版本——Blitz4j已经发布到Github 。与其他更传统的日志技术相比,Blitz4j 能够在大规模并发和流量拥挤的环境下高效生成日志,而且消耗的资源更少。这是通过重写log4j 中可能发生同步和死锁的代码部分实现的。

Netflix 对 log4J 的修改包括:

  1. 移除所有关键的同步,使用并发数据结构。
  2. 为内存缓冲区和工作线程提供强大的配置能力。
  3. 使用执行者池模型替换等待 - 通知模型,进一步隔离应用程序线程和日志线程。
  4. 通过可配置的摘要信息在日志高峰期更好地处理日志消息。

Netflix 宣称,使用 Blitz4j 时每秒钟记录 300 到 500 行日志的开销至少降低了75% ,同步相关的处理器使用峰值也完全消失了。现在,即使在高使用量和高日志量的情况下,应用程序也能在一个可接受的时间内做出响应。

随着交易量和每个实例日志需求的增加,Netflix 注意到log4j 消耗的资源越来越多,延缓了它所记录的进程的速度。因为对log4j 的大量投入,他们难以下定决心转移到像LogBack 这样不同的日志技术;相反,他们选择了重写log4j,为无阻塞和异步的日志进行了定制。 Log4j 框架并没有太大的变动;只有影响伸缩性的地方做了修改。

Netflix 的 Karthikeyan Ranganathan 认为,对于刚起步的项目而言 Blitz4j 可能并不是最好的选择。LogBack 是 log4j 团队开发的一个产品,它解决了 Netfliex 团队所关心的很多问题。在这方面,没有使用传统 log4j 框架或者基于slf4j 构建的项目应该考虑使用LogBack 而不是Blitz4j。但是对于在log4j 上有大量投入的公司而言,Blitz4j 是能够记录因特网规模日志的正确选择。

英文原文地址 Netflix Log4J Optimizations Yield Logging at Massive Scale


感谢臧秀涛对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ )或者腾讯微博( @InfoQ )关注我们,并与我们的编辑和其他读者朋友交流。

2012-12-10 07:324323
用户头像

发布了 321 篇内容, 共 126.4 次阅读, 收获喜欢 19 次。

关注

评论

发布
暂无评论
发现更多内容

2D动画设计 Reallusion Cartoon Animator Mac中文激活版

Rose

Amazon Q 从入门到精通 – 快速实战篇

亚马逊云科技 (Amazon Web Services)

影响LED显示屏清晰度的三大关键要素

Dylan

商业 LED显示屏 全彩LED显示屏 led显示屏厂家 舞台表演

SecureCRT:工程师的终极终端仿真器 ⚡ 支持SSH/Telnet/Serial,安全高效!

Rose

演讲大咖预告丨2025 Altair离散元仿真技术研讨会火热报名中!

Altair RapidMiner

数字孪生 仿真 CAE 离散元仿真 工程机械

BeeWorks IM:专业安全的企业私有化即时通讯软件

BeeWorks

即时通讯 IM 私有化部署 企业级应用

私有化im即时通讯及协同办公平台推荐!

BeeWorks

即时通讯 IM 私有化部署 企业级应用软件

小红书笔记详情API接口(附代码示例)

tbapi

小红书笔记详情接口 小红书API 小红书笔记数据采集 小红书笔记详情api

千万级成品数据集:OCR全能选手的“硬核底座”

数据堂

OCR 实现光学字符识别 数据标注 大模型 人工智能、

【HarmonyOS】鸿蒙实现刻度尺

鸿蒙 HarmonyOS HarmonyOS NEXT 实践分享

我在 Google L4 面试中的经验和教训

Nackydeng

程序员求职 谷歌面经 北美求职 google interview

麦杰工业数据底座亮相德阳,为工业设备管理贡献力量

麦杰研究院

麦杰工业数据底座亮相德阳,为工业设备管理贡献力量

麦杰科技

Cornerstone for Mac – 最强大的SVN客户端,让版本控制更流畅!

Rose

文献解读-LettuceGDB: The community database for lettuce genetics and omics

INSVAST

基因测序 基因数据分析 Sentieon 变异检测 精准医疗

职场人必备! Acrobat Pro DC 2023 – 轻松搞定合同、表单、电子签名!

Rose

vm虚拟机安装教程 附VMware Fusion Pro 13密钥及win11镜像包

Rose

编程开发!IntelliJ IDEA 2025.1.1中文激活教程-Mac/win

Rose

百度公布动物语言转换专利!可实现与动物深度交流

科技热闻

FunProxy - 使用 Rust 构建跨平台全链路测试抓包代理工具

vivo互联网技术

效率 rust 测试 代理 抓包工具

专为MacOS设计的视频下载器:Downie 4

Rose

Autodesk AutoCAD 2026破解版(cad2026中文安装包)-Mac/win

Rose

密码测评:确保数字安全的必要手段

黑龙江陆陆信息测评部

AI驱动仿真未来丨2025 Altair区域技术交流会华东站,报名开启!

Altair RapidMiner

AI 汽车 数字孪生 仿真 CAE

第二章:数据治理的边界在哪里

数据小吏

数据治理

《算法导论(第4版)》阅读笔记:p10-p10

codists

算法

HarmonyOS App 如何实现全网比价工具

网罗开发

鸿蒙 HarmonyOS HarmonyOS NEXT

Mac Axure RP 11中文安装教程 附 Axure RP 11密钥

Rose

Bolt.diy 创意建站 | 不懂代码,你也可以快速建站

六月的雨在InfoQ

CAP 函数计算 Bolt.diy 自然语言建站

mestrenova 14下载安装(核磁数据处理软件)-Mac/win

Rose

仓库拣货优化的领域建模

PeterOne

人工智能 运筹优化

Netflix Log4J 优化大规模日志记录_Java_Harry Brumleve_InfoQ精选文章