写点什么

Log4j 2.6 免垃圾收集

  • 2016-06-11
  • 本文字数:1791 字

    阅读完需:约 6 分钟

Java 语言中流行的日志库 Log4j 的最新版本 Log4j 2.6,将引入一系列选项以运行在免垃圾回收模式。该发布继续跟随前几个发布版,尝试提升日志库的性能,并且已经得到业界的积极响应。据性能改进倡议的引导者Remko Popm 透露,下一步将会增加log4j 可以运行在免垃圾回收模式的场景数量。

2014 年 7 月,log4j 2.0 在日志框架领域革命性地引入了异步记录器,相比于同步记录器将吞吐率提升了 6 至 68 倍。这些结果可能令人影响深刻,但日志框架的性能损耗仍然占据了部分高吞吐率、低延时应用响应时间的很大一部分,这常常导致开发者在部署时排除日志框架。对于高性能应用程序进行微调以避免垃圾回收导致的暂停能够达到非常好的效果,log4j 团队断定这些性能提升能够带来更多的用户。通过性能和 Java 专家 Kirk Pepperdine 的评论来判断,该假设是成立的:

Java 中的日志框架形势不容乐观。到今天为止,我很少碰到客户反馈他们的系统没有因为日志框架导致的负面影响。我与到的一个极端例子是,一个客户面临 4.5 秒的时限,但是日志记录占用了其中的 4.2 秒(很大一部分压力来自于异步追加器)。我将对次版本发布非常感兴趣。

防止垃圾回收是通过避免创建临时对象来实现的,这意味着需要尽可能的复用已经存在的对象。然而在最初发布的时候,整个库没有能够做到免垃圾回收,因此开发者如果希望实现该功能,需要注意追加器(appenders)、日志记录器(loggers)、格式化布局(formatting layouts)和 API 使用时的限制。

应用程序类型

部分被复用的对象保存在 ThreadLocal 区域中。这样的设计对独立的应用程序来说没有问题,但是对于 web 应用可能会引起内存泄漏。应用服务器可能会将 ThreadLocal 保存在线程池中,这意味着即使应用被卸载,用于日志记录的对象仍然会保持引用。因此,通过 ThreadLOcal 来复用对象的功能在 web 应用程序中默认是关闭的,既 log4j 无法完全运行在免垃圾回收模式。

日志记录器

log4j 防止触发垃圾回收的另一个方式是在将文本转换为字符数组的时候复用缓冲区。所有类型的应用程序都可因此受益,且该功能默认是开启的。然而使用同步日志记录器的多线程应用程序可能会有性能影响,因为不同的线程需要竞争共享的缓冲区。如果遇到这种情况,应该优先使用异步日志记录器,或者禁用共享缓冲区。

追加器

只有部分追加器已经修改以避免创建临时对象:Console(控制台)、File(文件)、RandomAccessFile(随机访问文件)、上述追加器的回卷追加器、MemoryMappedFile(内存映射文件)。任何其他追加器都会产生垃圾,并且需要被回收。然而需要注意的是,这些追加器本身可以免垃圾回收,仍然会有其他 I/O 相关的因素会影响它们的性能。

格式化布局

格式化布局可能是开发者在试图配置达到免垃圾回收时最棘手的部分,因为他们不近需要关注所需使用的布局,还需要关注布局中的选项。GelfLayout(Graylog Extended Log Format)布局只有在压缩选项禁用时才支持免垃圾回收,而 PatternLayout 只支持限定的转换模式,任何其他转换模式都会创建临时对象。

API 使用

API 本身也已经为避免创建临时对象而修改。除了之前支持简单可变长度参数(这样会创建一个临时数据)的方法之外,log4j 新增了所有方法的重载版本,最多支持 10 个参数。调用方法超过 10 个参数仍然会使用可变长度参数,这将会创建临时数组。

这个限制对于通过 SLF4J 使用 log4j 的场景影响较大,因为这个门面库只提供了最多两个参数的非变长参数。用户如果希望使用超过两个参数,并运行在免垃圾回收模式,就需要抛弃 SLF4J。

对代码的影响

虽然已经做了向下兼容,以避免开发者更新代码,有一类临时对象的创建和 log4j 框架本身无关:对基本数据类型的自动装箱。为了确保 JVM 不将基本数据类型装换成对应的对象,开发者在给 log4j 传递基本数据类型时,可以使用静态方法Unboxer.box()。该方法可以允许 log4j 直接处理基本数据类型而无需创建不必要的对象。

尽管有一系列的限制条件,这些改变已经有潜力在严格性能需求的场景下显著提升日志记录的体验。那些因为当前限制无法使用免垃圾回收特性的开发者,可以继续关注变更列表,在未来的发布版本中可能会提供进一步的改进。

查看英文原文: Log4j 2.6 Goes Garbage-Free


感谢张龙对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ @丁晓昀),微信(微信号: InfoQChina )关注我们。

2016-06-11 19:0010222

评论 2 条评论

发布
用户头像
大佬你好,请问 您是怎么在https://logging.apache.org/log4j/2.x/articles.html这里面发布教程的?
2022-08-13 14:14 · 浙江
回复
用户头像
就这?????????

2020-10-13 19:54
回复
没有更多了
发现更多内容

即刻报名,企业服务与新经济论坛亮点提前揭秘!

SelectDB

数据库 大数据 数据仓库 实时数仓 apache doris

峰会倒计时 3 天!互联网与文娱论坛演讲亮点预告!

SelectDB

数据库 大数据 数据仓库 实时数仓 apache doris

将日志压缩并归档到 Amazon S3 Glacier 存储层中

亚马逊云科技 (Amazon Web Services)

分布式 S3 储存

如何合并模型对象

3D建模设计

模型 3D

如何按照固定比例缩放模型

3D建模设计

3D模型 等比缩放

万字长文:拆解银行数智运营之困!

京东科技开发者

人工智能 数字化转型 金融 企业号10月PK榜

瑞技伙伴 | ZPE 带外管理方案,稳固您的IT世界

Bytebridge

数据中心 带外管理方案 ZPE

选择香港服务器发展线上业务的未来趋势:技术与市场的变化

一只扑棱蛾子

香港服务器

如何修改模型粗糙度增强模型表面粗糙度

3D建模设计

3D模型 粗糙度

想让你的代码简洁,试试这个SimpleDateFormat类高深用法

华为云开发者联盟

Java 后端 开发 华为云 华为云开发者联盟

深入理解 Netty FastThreadLocal

vivo互联网技术

性能优化 Netty ThreadLocal 内存泄漏 FastThreadLocal

对话在行人|九州通:携手用友打造招聘共享中心实现招聘数智化

用友BIP

2023全球商业创新大会 对话在行人

高性能计算与多模态处理的探索之旅:英伟达GH200性能优化与GPT-4V的算力加速未来

GPU算力

这一大波Offer来的太突然了

王磊

Java

如何给模型换色

3D建模设计

3D模型 颜色 材质

OpenHarmony持久化存储UI状态:PersistentStorage

OpenHarmony开发者

OpenHarmony

Elasticsearch Relevance Engine---为AI变革提供高级搜索能力[ES向量搜索、常用配置参数、聚合功能等详解]

汀丶人工智能

ES 向量检索 搜索系统 语义搜索

HarmonyOS音频开发指导:使用AVPlayer开发音频播放功能

HarmonyOS开发者

HarmonyOS

研发日常踩坑-Mysql分页数据重复 | 京东云技术团队

京东科技开发者

MySQL 数据库 分页 企业号10月PK榜

和鲸ModelWhale与中科可控X系列异构加速服务器完成适配认证,搭载海光芯片,构筑AI算力底座

ModelWhale

gpu 服务器 信创 算力 数据科学

云计算进入 AI 原生时代

Baidu AICLOUD

大模型 RDMA AI 原生云

如何设计一套基于API的会员系统

Kevin_913

架构设计实战 Java'

一款兼容微信抖音支付宝小程序的工具可以直接把小程序搬到自己App

Onegun

小程序 小程序容器

浅析“代码可视化” | 京东云技术团队

京东科技开发者

架构 字节码 企业号10月PK榜 代码可视化

产品需求交付质量保证的“七重门” | 京东云技术团队

京东科技开发者

测试 交付质量 企业号10月PK榜

即时通讯音视频开发(二十):一文读懂视频的颜色模型转换和色域转换

JackJiang

网络编程 即时通讯 IM

Log4j 2.6免垃圾收集_Java_Abraham Marín Pérez_InfoQ精选文章