MapReduce 服务是基于华为历经行业数万节点成功使用经验,在云上打造的企业级 Hadoop 大数据平台服务,一键部署,灵活弹性伸缩。
包含了 Hadoop、Spark、HBase、Kafka、Storm、
Hive 等丰富内核组件,帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。
使用 MapReduce 服务的一些大数据处理,比如说会对大量数据进行排序,属于高计算密集型业务,对于计算性能及稳定性要求较高,各个节点的计算能力要保持均衡;在计算节点之间依赖于网络进行集群数据同步,对于网络带宽存在较高诉求;计算节点在本地存在大量的数据读写,对于存储带宽有很高诉求;针对这些特点,MapReduce 服务与华为云计算优势结合,推出了支持通用计算增强型(C3 型)弹性云服务器规格的大数据集群。
通用计算增强型(C3 型)弹性云服务器是公有云新推出的一系列性能更高、计算能力更稳定的弹性云服务器规格,搭载 Intel Xeon SkyLake 全新一代 CPU,配套高性能网络,综合性能及稳定性全面提升,满足对业务稳定性及计算性能要求较高的企业级应用诉求。通用计算增强型(C3 型)性能较上一代 C2 云服务器大幅提升。
单核整形 25%↑
单核 Linpack70%↑
内存带宽 62%↑
计算性能优于业界 15%以上
全面配套 25G 网络
与通用计算型相比,通用计算增强型弹性云服务器提供了更大规格的 CPU 和内存组合,可选范围更广,同时搭载全新网络加速引擎,可为用户提供更高的网络性能。它可以支持最高带宽 18G,支持 PPS(Package Per Second)可高达 500 万。配套华为自研 25GE 智能高速网卡,提供超高网络带宽和 PPS 收发包能力。
MRS 搭配 C3 规格虚拟机,大幅提升了集群的计算能力。
C3 相比 C2 在流式集群上性能有 4 倍的提升。
华为云 MRS 与国内其他公有云大数据服务的同等规格虚拟机对比,针对典型的大数据处理测试用例(WordCount, Terasort, Kmeans 等),MRS 集群的数据处理速度总体提升超过 30%。具体测试结果如下:
本文转载自 华为云产品与解决方案 公众号。
原文链接:https://mp.weixin.qq.com/s/oY2qWm-mczV8QqE4oZ13aw
评论