大厂Data+Agent 秘籍:腾讯/阿里/字节解析如何提升数据分析智能。 了解详情
写点什么

用华为云 C3 让你的 MRS 集群风驰电掣

  • 2020-04-01
  • 本文字数:835 字

    阅读完需:约 3 分钟

用华为云C3让你的MRS集群风驰电掣

MapReduce 服务是基于华为历经行业数万节点成功使用经验,在云上打造的企业级 Hadoop 大数据平台服务,一键部署,灵活弹性伸缩。

包含了 Hadoop、Spark、HBase、Kafka、Storm、

Hive 等丰富内核组件,帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。


使用 MapReduce 服务的一些大数据处理,比如说会对大量数据进行排序,属于高计算密集型业务,对于计算性能及稳定性要求较高,各个节点的计算能力要保持均衡;在计算节点之间依赖于网络进行集群数据同步,对于网络带宽存在较高诉求;计算节点在本地存在大量的数据读写,对于存储带宽有很高诉求;针对这些特点,MapReduce 服务与华为云计算优势结合,推出了支持通用计算增强型(C3 型)弹性云服务器规格的大数据集群。


通用计算增强型(C3 型)弹性云服务器是公有云新推出的一系列性能更高、计算能力更稳定的弹性云服务器规格,搭载 Intel Xeon SkyLake 全新一代 CPU,配套高性能网络,综合性能及稳定性全面提升,满足对业务稳定性及计算性能要求较高的企业级应用诉求。通用计算增强型(C3 型)性能较上一代 C2 云服务器大幅提升。


  • 单核整形 25%↑

  • 单核 Linpack70%↑

  • 内存带宽 62%↑

  • 计算性能优于业界 15%以上

  • 全面配套 25G 网络


与通用计算型相比,通用计算增强型弹性云服务器提供了更大规格的 CPU 和内存组合,可选范围更广,同时搭载全新网络加速引擎,可为用户提供更高的网络性能。它可以支持最高带宽 18G,支持 PPS(Package Per Second)可高达 500 万。配套华为自研 25GE 智能高速网卡,提供超高网络带宽和 PPS 收发包能力。


MRS 搭配 C3 规格虚拟机,大幅提升了集群的计算能力。


  • C3 相比 C2 在流式集群上性能有 4 倍的提升。

  • 华为云 MRS 与国内其他公有云大数据服务的同等规格虚拟机对比,针对典型的大数据处理测试用例(WordCount, Terasort, Kmeans 等),MRS 集群的数据处理速度总体提升超过 30%。具体测试结果如下:



本文转载自 华为云产品与解决方案 公众号。


原文链接:https://mp.weixin.qq.com/s/oY2qWm-mczV8QqE4oZ13aw


2020-04-01 14:53803

评论

发布
暂无评论
发现更多内容

ThreadLocal基本使用和内存泄漏分析,kafka性能调优

Java 程序员 后端

Threadtear:一款多功能Java代码反混淆工具套件,小米java社招面试

Java 程序员 后端

Tomcat性能优化前后,有多大的差距,今天测试给大家看(1)

Java 程序员 后端

Spring系列:自动注入(autowire,redis笔记

Java 程序员 后端

She Builds Summit | 感受她的科技力量!

亚马逊云科技 (Amazon Web Services)

开源 职场

SSM整合,kafka教程分享

Java 程序员 后端

ThreadLocal到底是什么?它解决了什么问题?,kalilinux渗透教程视频

Java 程序员 后端

Spring的XML解析原理,这一次全搞懂再走!,springmybatis整合原理

Java 程序员 后端

代码检查规则:Python语言案例详解

百度开发者中心

Python 方法论 学习笔记

Struts 学习笔记1 -Struts Framework 概览,BAT面试&高级进阶

Java 程序员 后端

ThreadLocal内存泄漏分析与解决方案(1),linux文件系统原理

Java 程序员 后端

ThreadLocal内存泄漏分析与解决方案,Java完全自学手册下载

Java 程序员 后端

Spring源码学习~循环依赖(面试必问系列,java最新框架技术

Java 程序员 后端

SQL注入漏洞防护看这一篇就够了!,万字长文

Java 程序员 后端

双11攻略来啦:参与Oracle VS openGauss 在线研讨,与盖国强老师、李国良教授面对面!

墨天轮

oracle opengauss 对话

Spring(六)(1),mongodb入门书籍

Java 程序员 后端

Spring(二),java基础面试题应届生

Java 程序员 后端

质效中台助力实现质量度模型规模化落地

百度Geek说

架构 中台 测试 QA

Tomcat性能优化前后,有多大的差距,今天测试给大家看,linux视频教程推荐

Java 程序员 后端

Thymeleaf基本使用,java基础入门第二版第二章答案

Java 程序员 后端

Spring源码解析(二)AOP,java基础课程百度云

Java 程序员 后端

Spring(二十),Java中级开发笔试题及答案

Java 程序员 后端

SQL语句基本语法及函数方法,java编程入门视频教程下载

Java 程序员 后端

Tomcat各种网络异常场景解决方案及优化,基础+底层+算法+数据库

Java 程序员 后端

技术+案例详解无监督学习Autoencoder

华为云开发者联盟

神经网络 算法 图片 无监督学习 Autoencoder

SQL 中判断条件的先后顺序,会引起索引失效么?,java虚拟机的原理

Java 程序员 后端

String Bean 注入方式,2021年Java程序员职业规划

Java 程序员 后端

Tomcat实现热部署、热加载原理解析,线程池底层实现原理

Java 程序员 后端

Spring注解驱动,java面试项目中遇到的问题

Java 程序员 后端

Spring(六),终于找到一个看得懂的JVM内存模型了

Java 程序员 后端

SymmetricDS 数据库双向同步开源软件入门,我要自学网java基础百度云

Java 程序员 后端

用华为云C3让你的MRS集群风驰电掣_行业深度_华为云产品与解决方案_InfoQ精选文章