写点什么

用华为云 C3 让你的 MRS 集群风驰电掣

  • 2020-04-01
  • 本文字数:835 字

    阅读完需:约 3 分钟

用华为云C3让你的MRS集群风驰电掣

MapReduce 服务是基于华为历经行业数万节点成功使用经验,在云上打造的企业级 Hadoop 大数据平台服务,一键部署,灵活弹性伸缩。

包含了 Hadoop、Spark、HBase、Kafka、Storm、

Hive 等丰富内核组件,帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。


使用 MapReduce 服务的一些大数据处理,比如说会对大量数据进行排序,属于高计算密集型业务,对于计算性能及稳定性要求较高,各个节点的计算能力要保持均衡;在计算节点之间依赖于网络进行集群数据同步,对于网络带宽存在较高诉求;计算节点在本地存在大量的数据读写,对于存储带宽有很高诉求;针对这些特点,MapReduce 服务与华为云计算优势结合,推出了支持通用计算增强型(C3 型)弹性云服务器规格的大数据集群。


通用计算增强型(C3 型)弹性云服务器是公有云新推出的一系列性能更高、计算能力更稳定的弹性云服务器规格,搭载 Intel Xeon SkyLake 全新一代 CPU,配套高性能网络,综合性能及稳定性全面提升,满足对业务稳定性及计算性能要求较高的企业级应用诉求。通用计算增强型(C3 型)性能较上一代 C2 云服务器大幅提升。


  • 单核整形 25%↑

  • 单核 Linpack70%↑

  • 内存带宽 62%↑

  • 计算性能优于业界 15%以上

  • 全面配套 25G 网络


与通用计算型相比,通用计算增强型弹性云服务器提供了更大规格的 CPU 和内存组合,可选范围更广,同时搭载全新网络加速引擎,可为用户提供更高的网络性能。它可以支持最高带宽 18G,支持 PPS(Package Per Second)可高达 500 万。配套华为自研 25GE 智能高速网卡,提供超高网络带宽和 PPS 收发包能力。


MRS 搭配 C3 规格虚拟机,大幅提升了集群的计算能力。


  • C3 相比 C2 在流式集群上性能有 4 倍的提升。

  • 华为云 MRS 与国内其他公有云大数据服务的同等规格虚拟机对比,针对典型的大数据处理测试用例(WordCount, Terasort, Kmeans 等),MRS 集群的数据处理速度总体提升超过 30%。具体测试结果如下:



本文转载自 华为云产品与解决方案 公众号。


原文链接:https://mp.weixin.qq.com/s/oY2qWm-mczV8QqE4oZ13aw


2020-04-01 14:53848

评论

发布
暂无评论
发现更多内容

新书上市 | 十分易上手的图解教程,全系列累计销量20万册!

图灵教育

程序员 计算机 图论

宏杉科技加入阿里云PolarDB开源数据库社区

阿里云数据库开源

阿里云 polarDB 阿里云数据库 PolarDB-PG PolarDB for PostgreSQL

软件测试 | 测试开发 | 常见接口协议解析

测吧(北京)科技有限公司

TCP

开源治理的基本实践与指导原则

SEAL安全

开源 开源安全 软件供应链安全 开源安全与治理

为什么资源隔离对HTAP至关重要?

OceanBase 数据库

小程序可以在智能设备上运行?

Speedoooo

小程序 物联网 IoT 智能设备 小程序容器

《穿越时空的git》之创建版本库和常用命令操作

霍格沃兹测试开发学社

最新版!955、不加班、双休的公司名单

千锋IT教育

iOS自动化真机测试验证环境过程中常见问题解析

霍格沃兹测试开发学社

一文带你了解K8S 容器编排(上)

霍格沃兹测试开发学社

精彩演讲实录|在确定性和不确定性中探索AIOps的适用性

TRaaS

技术文章

RPC接口测试技术-Tcp 协议的接口测试

霍格沃兹测试开发学社

hive on spark 还是 spark on hive?

一生要强的查数姑

大数据 hive spark SQL 大数据仓库

fastposter v2.9.2 最简海报生成器

物有本末

海报生成器 电商海报 图片生成

软件测试 | 测试开发 | 一文搞定 uiautomator2 自动化测试工具使用

测吧(北京)科技有限公司

自动化测试

TiFlash 源码解读(七)TiFlash Proxy 模块

PingCAP

TiDB TiDB 源码解读

易观分析&Pangle联合发布《全球新兴市场移动应用报告》

易观分析

新兴市场

iOS 自动化测试踩坑(一): 技术方案、环境配置与落地实践

霍格沃兹测试开发学社

TiDB v6.2 发版

PingCAP

#TiDB

【译】YouTube 架构

Rae

数据库 架构 youtube 后端技术

Python代码用在这些地方,其实1行就够了

华为云开发者联盟

Python 开发 企业号九月金秋榜

开学季 | Y 省教育厅这张卷,融云答出了100分!

融云 RongCloud

通讯协议

不信谣不传谣,亲自动手验证ModelBox推理是否真的“高性能”

华为云开发者联盟

人工智能 企业号九月金秋榜

我们做了一个云原生成本优化产品

TRaaS

软件测试 | 测试开发 | 如何使用代理配置快速定位接口测试脚本问题?

测吧(北京)科技有限公司

测试

【译】日志:每个软件工程师都应该了解实时数据的统一抽象【一】

Rae

架构 分布式 日志 原理

软件测试 | 测试开发 | AppCrawler 自动遍历测试实践(三):动手实操与常见问题汇总

测吧(北京)科技有限公司

测试

TDengine3.0计算查询引擎的优化与升级

TDengine

数据库 tdengine 时序数据库 企业号九月金秋榜

软件测试 | 测试开发 | 测试人员必须掌握的测试用例

测吧(北京)科技有限公司

测试

内核实战教程第四期 _ 带你走进数据库 SQL 引擎

OceanBase 数据库

新书上市 | 十分易上手的图解教程,全系列累计销量20万册!

图灵社区

程序员 计算机 图论

用华为云C3让你的MRS集群风驰电掣_行业深度_华为云产品与解决方案_InfoQ精选文章