写点什么

用华为云 C3 让你的 MRS 集群风驰电掣

  • 2020-04-01
  • 本文字数:835 字

    阅读完需:约 3 分钟

用华为云C3让你的MRS集群风驰电掣

MapReduce 服务是基于华为历经行业数万节点成功使用经验,在云上打造的企业级 Hadoop 大数据平台服务,一键部署,灵活弹性伸缩。

包含了 Hadoop、Spark、HBase、Kafka、Storm、

Hive 等丰富内核组件,帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。


使用 MapReduce 服务的一些大数据处理,比如说会对大量数据进行排序,属于高计算密集型业务,对于计算性能及稳定性要求较高,各个节点的计算能力要保持均衡;在计算节点之间依赖于网络进行集群数据同步,对于网络带宽存在较高诉求;计算节点在本地存在大量的数据读写,对于存储带宽有很高诉求;针对这些特点,MapReduce 服务与华为云计算优势结合,推出了支持通用计算增强型(C3 型)弹性云服务器规格的大数据集群。


通用计算增强型(C3 型)弹性云服务器是公有云新推出的一系列性能更高、计算能力更稳定的弹性云服务器规格,搭载 Intel Xeon SkyLake 全新一代 CPU,配套高性能网络,综合性能及稳定性全面提升,满足对业务稳定性及计算性能要求较高的企业级应用诉求。通用计算增强型(C3 型)性能较上一代 C2 云服务器大幅提升。


  • 单核整形 25%↑

  • 单核 Linpack70%↑

  • 内存带宽 62%↑

  • 计算性能优于业界 15%以上

  • 全面配套 25G 网络


与通用计算型相比,通用计算增强型弹性云服务器提供了更大规格的 CPU 和内存组合,可选范围更广,同时搭载全新网络加速引擎,可为用户提供更高的网络性能。它可以支持最高带宽 18G,支持 PPS(Package Per Second)可高达 500 万。配套华为自研 25GE 智能高速网卡,提供超高网络带宽和 PPS 收发包能力。


MRS 搭配 C3 规格虚拟机,大幅提升了集群的计算能力。


  • C3 相比 C2 在流式集群上性能有 4 倍的提升。

  • 华为云 MRS 与国内其他公有云大数据服务的同等规格虚拟机对比,针对典型的大数据处理测试用例(WordCount, Terasort, Kmeans 等),MRS 集群的数据处理速度总体提升超过 30%。具体测试结果如下:



本文转载自 华为云产品与解决方案 公众号。


原文链接:https://mp.weixin.qq.com/s/oY2qWm-mczV8QqE4oZ13aw


2020-04-01 14:53947

评论

发布
暂无评论
发现更多内容
用华为云C3让你的MRS集群风驰电掣_行业深度_华为云产品与解决方案_InfoQ精选文章