AICon上海|与字节、阿里、腾讯等企业共同探索Agent 时代的落地应用 了解详情
写点什么

云中巨象——作为一种服务的 Hadoop

  • 2016-05-15
  • 本文字数:698 字

    阅读完需:约 2 分钟

Ashish Thusoo, Qubole 的 CEO 和联合创始人,最近在 Enterprise Data World Conference (EDW) 谈到了作为一种服务产品的“云中巨象” Hadoop 。大数据作为服务而不是一个产品会成为一个趋势,Hadoop 作为一种服务提供,旨在帮助机构处理大规模运行的Hadoop 服务的挑战和成本。这些基于云服务的解决方案也可以从云服务的其他功能中获益,如动态配置、计算和存储的灵活性以及在多个地区的可用性。

Ashish 在开始谈论时说到,现在数据的性质,包括海里的交互数据,都是非结构化的。而不仅仅是我们长期以来传统应用程序里处理数据结构化数据。

分析的性质也发生了改变。Ashish 谈到了分析值从描述性向规范性分析的发展。

  • 描述性分析(发生了什么?)
  • 诊断性分析(为什么发生?)
  • 预测性分析(将会发生什么?)
  • 规范性分析(我们怎样才会让它发生?)

云提供很多好处,如按需和弹性扩展架构,高可扩展的对象存储和处理,和自适应的基础设施。使用云大数据平台提供更快的生产时间、敏捷和基础设施的灵活性以及显著降低成本。

Virtual Private Cloud (VPC) 提供隔离访问计算和存储,以及提供安全实践。VPC 的安全性包括云存储中的数据和网络数据,以及基于访问计算和存储的角色加密选项。

现代数据处理平台包括多个处理引擎,可以处理各种案例,如下面列举出:

  • 复杂批次处理 SQL,Hive
  • 数据科学,Spark
  • 简单交互 SQL 查询,Presto
  • 批量数据清洗(ETL),Map Reduce

Ashish 还谈论了基于云平台的大数据参考架构,包括多租户数据访问、引擎统一、云计算服务和可移植性服务等。他总结报告说,Hadoop 作为一种服务提供在大数据架构决策时是一个吸引人眼球的选择。

查看英文原文 Elephant in the Cloud - Hadoop as a Service

2016-05-15 19:002574
用户头像

发布了 43 篇内容, 共 29.6 次阅读, 收获喜欢 7 次。

关注

评论

发布
暂无评论
发现更多内容

北京一咖啡店启动数字人民币应用场景测试 店员:目前处于内测阶段

CECBC

数字人民币

Rust布道者张汉东倾授,入门Rust初学者都要攻破哪些难点?

华为云开发者联盟

学习 rust 语言

仅4步,就可通过SQL进行分布式死锁的检测与消除

华为云开发者联盟

数据库 sql 死锁

一周信创舆情观察(12.21~12.27)

统小信uos

ClickHouse数据导入

一粒

kafka Logstash Clickhouse

ClickHouse常见集群部署架构

一粒

nosql 架构 Clickhouse

写出一手烂代码的19条准则

Java架构师迁哥

ClickHouse利器—如何提高留存计算速度

行者AI

数据库

wildfly 21的配置文件和资源管理

程序那些事

程序那些事 web服务器 应用配置 服务器部署

Java中的常量

cdhqyj

Java

百度京Fun生活节 双旦福利HIGH 翻全城

DT极客

Flink Forward Asia 2020 -- Keynote 总结

Apache Flink

flink

软件测试——网络协议知识(二)

测试人生路

软件测试 网络通信协议

第一张区块链完税证明在深圳开出,区块链政务应用再获突破

CECBC

区块链 电子证明

2020中国低代码平台市场发展年度报告(深度分析)

J2PaaS低代码平台

软件 低代码 开发工具 SaaS/IaaS/PaaS 软件开发、

RPC Demo(二) 基于 Zookeeper 的服务发现

Java zookeeper RPC 服务发现

如何使用mock应对测试所需随机数据

华为云开发者联盟

测试 数据 Mock

实用流程工具,浅析LR.NET配置型工作流引擎

雯雯写代码

.net 工作流

Linux基本操作命令

行者AI

Linux

云挖矿APP系统开发|云挖矿软件开发

系统开发

架构师 3 期 3 班 -week6- 作业

zbest

作业 week6

架构师训练营知识点整理

garlic

架构师训练营第 1 期

重新发现科技与人文的互动

脑极体

令数字起舞,让自然微笑:TECH4ALL的2020启示录

脑极体

破除数据垄断,数据上链或是关键

CECBC

区块链 大数据

架构师训练营大作业

Gosling

架构师训练营第 1 期

华为云·云享专家李万龙: IoT 梦想,从0到1的实现

华为云开发者联盟

技术 物联网 IoT

架构师 3 期 3 班 -week6- 总结

zbest

总结 week6

跨年巨作!13万字!腾讯高工纯手写“JDK源码笔记”直接带你飙向实战

比伯

Java 编程 架构 面试 计算机

Vmware+Ubuntu 配置静态IP

千泷

云中巨象——作为一种服务的Hadoop_服务革新_Srini Penchikala_InfoQ精选文章