写点什么

Renaissance:比较 JVM 性能的新基准

2019 年 6 月 18 日

Renaissance:比较 JVM 性能的新基准

Charles 大学、Oracle 实验室和其他几所大学的研究人员发布了Renaissance,它是一个用于 Java 虚拟机性能测试的新基准。这个基准让 JVM 开发人员能够测量不同 JVM 发行版之间的性能,从而更好地理解应用程序在特定的 JVM 上有怎样的表现。


Renaissance 旨在对 Java 8(2014)到 Java 12(2019)这些版本之间发布的并发特性进行更多的测试。这些测试在诸如 DaCapo 和 SpecJVM2008 等基准使用过的一些测试基础上进行了扩展。总共有 21 个面向并行和并发的基准测试,覆盖了 Java 和 Scala 代码。另一个热门的 JVM 基准测试是 SPECJB2015,IBM使用它来演示硬件更改对Java性能的影响


Renaissance 白皮书的 12 位作者中,有 5 位与 Oracle 实验室合作开发 GraalVM。GraalVM是一种新的多语种虚拟机,可以在一个运行时中运行包括 Java 在内的多种软件语言。GraalVM 有社区版和商业企业版两个版本。每个版本都有两种模式:热点模式和本机镜像。热点模式是在OpenJDK的HotSpot实现之后命名的,且通过 Java 测试兼容性工具包(JCK)的测试,完全兼容 OpenJDK。GRAALVM 的另一种模式(本机镜像)将 Java 应用程序编译成本机机器码,由于一系列原因,它并不完全遵循Java SE的兼容性定义,但它可以运行符合其假设的应用程序。


来自 Excelsior 的高级软件工程师 Nikita Lipsky 对Sun Microsystems在2004 年定义的本机镜像兼容性问题提出了质疑:“其中有一条规则要求产品的‘所有配置’都具备兼容性。我们不能使用特殊的配置来通过测试,然后鼓励客户使用其他实际上不兼容的配置。是的,那个把戏有人试过一次。”


InfoQ 与 Oracle 进行了沟通,确认了在 Renaissance 基准中发布的数字是在兼容 HotSpot 模式下生成的,因此可以用它们来与其他 JVM 进行比较。


总体而言,Graalvm 社区版的性能与 OpenJDK 相当,而 Graalvm 企业版得分更好。在下面的图表中,得分越高越好。



Renaissance 的发布引起了与其他 Java 实现的混淆,因为他们没有参与,也不知道基准可以测量什么东西。与 SPEC(SPEC 提供了一个公平的基准线,在这个平台上,竞争厂商达成了一致)不同,GraalVM 独自参与了 Renaissance。尽管 12 位作者中有 7 位来自不同的大学,但竞争形势并不存在。研究 Shenandoah 垃圾收集器的 Red Hat 性能专家Aleksey Shipilev说 :“基准游戏是关于可信度,而供应商基准则充满了利益冲突。新的基准套件也如此,而与经过特别优化的供应商产品成果一起出现的新的基准套件就更是如此。”


Azul CTO Gil Tene 解释说:“创建‘新基准’可能并非偶然,但这也没什么错。时间会告诉我们这是否是一个可以用来比较 JVM 性能的基准。只有当参赛者都站在同一条起跑线上,比赛才算上是真正的比赛。如果 Renaissance 是一个真正的基准,那么它将会保持不变,而不是‘自适应并发生快速变化’,从而允许其他人重现稳定的基准结果,对不同的实现进行比较。”


Shipilev 指出了按照定义起始线来运行基准的困难之处,“如果说这个套件是‘开源和可更改的’,‘基准的选择具有公性’就是不真实的,所以并不能解决当前的问题。”


查看英文原文New Renaissance Performance Benchmark Aims to Compare JVMs


2019 年 6 月 18 日 08:005284
用户头像

发布了 141 篇内容, 共 58.0 次阅读, 收获喜欢 362 次。

关注

评论

发布
暂无评论
发现更多内容

架构师训练营第三周总结

W_T

第三周总结

丿淡忘

极客大学架构师训练营

单例与组合模式代码实现

Lane

极客大学架构师训练营

架构师训练营第三周作业

Jerry Tse

极客大学架构师训练营 作业

week3 作业二

任鑫

第三周作业-命题作业

molly

极客大学架构师训练营

第3周 代码重构:代码重构能力是架构师最基本的能力

陆不得

设计模式

丿淡忘

单例模式 极客大学架构师训练营 组合模式

程序员的晚餐 | 6 月 24 日 微甜的毛豆

清远

美食

第三周设计模式总结

石刻掌纹

作业-组合模式和单例模式

蒜泥精英

架构师训练营第3周作业

aoeiuvzcs

面向对象设计模式课程作业

行下一首歌

极客大学架构师训练营

架构师训练营-第三章-作业

而立

极客大学架构师训练营

架构师训练营 - 第三周作业

kk

面向对象编程

Arthur

聊聊设计模式——上篇

Jerry Tse

随笔 极客大学架构师训练营 作业 23种设计模式

架构师训练营 第三周 个人感想

且听且吟

设计模式总结(golang版)

2流程序员

设计模式学习实践

倪惠华

乘风破浪的5G,与隐藏在深海的EMC暗礁

脑极体

架构师训练营-第三周-作业

狂奔嘀兔纸

极客大学架构师训练营

week03作业

Safufu

架构师训练营 - 学习笔记 - 第三周

小遵

极客时间第 0 期架构师训练营第三周作业

2流程序员

架构师训练营-作业3

紫极

架构课第三周课后作业

张瑞浩

第三周作业

倪惠华

模式和重构-学习心得

蒜泥精英

第三周学习总结

CP

第三周作业

毛叫

极客大学架构师训练营

Renaissance:比较 JVM 性能的新基准-InfoQ