免费下载案例集|20+数字化领先企业人才培养实践经验 了解详情
写点什么

用华为云 C3 让你的 MRS 集群风驰电掣

  • 2020-04-01
  • 本文字数:835 字

    阅读完需:约 3 分钟

用华为云C3让你的MRS集群风驰电掣

MapReduce 服务是基于华为历经行业数万节点成功使用经验,在云上打造的企业级 Hadoop 大数据平台服务,一键部署,灵活弹性伸缩。

包含了 Hadoop、Spark、HBase、Kafka、Storm、

Hive 等丰富内核组件,帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。


使用 MapReduce 服务的一些大数据处理,比如说会对大量数据进行排序,属于高计算密集型业务,对于计算性能及稳定性要求较高,各个节点的计算能力要保持均衡;在计算节点之间依赖于网络进行集群数据同步,对于网络带宽存在较高诉求;计算节点在本地存在大量的数据读写,对于存储带宽有很高诉求;针对这些特点,MapReduce 服务与华为云计算优势结合,推出了支持通用计算增强型(C3 型)弹性云服务器规格的大数据集群。


通用计算增强型(C3 型)弹性云服务器是公有云新推出的一系列性能更高、计算能力更稳定的弹性云服务器规格,搭载 Intel Xeon SkyLake 全新一代 CPU,配套高性能网络,综合性能及稳定性全面提升,满足对业务稳定性及计算性能要求较高的企业级应用诉求。通用计算增强型(C3 型)性能较上一代 C2 云服务器大幅提升。


  • 单核整形 25%↑

  • 单核 Linpack70%↑

  • 内存带宽 62%↑

  • 计算性能优于业界 15%以上

  • 全面配套 25G 网络


与通用计算型相比,通用计算增强型弹性云服务器提供了更大规格的 CPU 和内存组合,可选范围更广,同时搭载全新网络加速引擎,可为用户提供更高的网络性能。它可以支持最高带宽 18G,支持 PPS(Package Per Second)可高达 500 万。配套华为自研 25GE 智能高速网卡,提供超高网络带宽和 PPS 收发包能力。


MRS 搭配 C3 规格虚拟机,大幅提升了集群的计算能力。


  • C3 相比 C2 在流式集群上性能有 4 倍的提升。

  • 华为云 MRS 与国内其他公有云大数据服务的同等规格虚拟机对比,针对典型的大数据处理测试用例(WordCount, Terasort, Kmeans 等),MRS 集群的数据处理速度总体提升超过 30%。具体测试结果如下:



本文转载自 华为云产品与解决方案 公众号。


原文链接:https://mp.weixin.qq.com/s/oY2qWm-mczV8QqE4oZ13aw


2020-04-01 14:53638

评论

发布
暂无评论
发现更多内容

模块五作业

俊杰

架构实战营

iOS SDK 的 H5 打通方案演进 | 数据采集

神策技术社区

程序员 大前端 后端 数据 方案

基于 CODING CD + Nocalhost 在大型应用的 ChatOps 实践

CODING DevOps

DevOps 工具 CI/CD 开发测试 ChatOps

你真的懂Redis与MySQL双写一致性如何保证吗?

Linux服务器开发

MySQL redis 中间件 架构师 Linux服务器开发

上游思维:如何定义成功?

石云升

读书笔记 8月日更 上游思维

技术白皮书:现代企业架构设计

码语者

企业架构

斯图飞腾发布《如何将客户反馈转化为有价值的商业洞察》白皮书

分享我的华为面经,华为OD岗笔试+面试心得,本人已成功入职!

编程菌

Java 华为 程序员 面试 计算机

上线直接霸占GitHub榜一!腾讯内部spring全家桶笔记细节拉满!

Java 编程 架构 腾讯 面试

硬核技术,带你走进3D点云车道线自动识别

澳鹏Appen

自动驾驶 机器学习 训练数据 3D点云 车道线标注

科技的世界里没有“粉红税”

脑极体

百度世界大会2021: 与时代共振,AI让生活更好

百度大脑

人工智能

百度商业大规模微服务分布式监控系统-凤睛

百度开发者中心

产品 最佳实践 方法论 经验分享 监控系统

博睿数据斩获“飞腾PCS认证集成商”,推动国产化生态建设再进一步!

博睿数据

hadoop 基本原理与应用

神策技术社区

hadoop 程序员 Hadoop全分布式集群

文化与科技的交织,华为P50 Pro与一曲长城谣

脑极体

OCR开发者福音:PDF提取Excel文件算法开源啦

百度开发者中心

开源 最佳实践 开发者 方法论 OCR

第一次看房

escray

生活记录 8月日更

神策数据微信小程序 SDK 功能介绍

神策技术社区

小程序 微信 代码 神策数据 维护

ipfs国家认可吗?ipfs挖矿靠谱吗?

IPFS国家认可吗 ipfs挖矿靠谱吗

Web JS SDK 架构解析

神策技术社区

技术 源码分析 神策数据

阿里技术3面+HR面,奋战两个月,终斩获offer定级阿里P6+

编程菌

Java 编程 程序员 面试 计算机

三年开发,跳槽腾讯三面终获Offer,定级T2-1(面试题+经验总结)

编程菌

Java 编程 程序员 面试 计算机

Android SDK 的 H5 打通方案演进

神策技术社区

大前端 后端 神策数据 shujv

分享 6 个JavaScript学习资源

devpoint

JavaScript GitHub 8月日更

大二上半学期还挂科两门,大三上半学期就找到了外企实习工作,半年时间,我是怎么逆袭的?

编程菌

Java 编程 程序员 面试 计算机

ASM 实现 Hook Lambda 和方法引用

神策技术社区

大前端 后端 asm 代码 神策数据

OceanBase 常见参数和变量究竟有什么本质区别?

OceanBase 数据库

数据库 oceanbase OceanBase 开源 OceanBase 社区版

Springboot通过@WebFilter日志双份打印BUG分享

FunTester

性能测试 springboot bug

Python开发篇——RSA加密算法和SHA1计算文件校验码

吴脑的键客

Python

云原生 | 混沌工程工具 ChaosBlade Operator Pod 篇

RadonDB

数据库 混沌工程

用华为云C3让你的MRS集群风驰电掣_行业深度_华为云产品与解决方案_InfoQ精选文章