QCon北京「鸿蒙专场」火热来袭!即刻报名,与创新同行~ 了解详情
写点什么

云中巨象——作为一种服务的 Hadoop

  • 2016-05-15
  • 本文字数:698 字

    阅读完需:约 2 分钟

Ashish Thusoo, Qubole 的 CEO 和联合创始人,最近在 Enterprise Data World Conference (EDW) 谈到了作为一种服务产品的“云中巨象” Hadoop 。大数据作为服务而不是一个产品会成为一个趋势,Hadoop 作为一种服务提供,旨在帮助机构处理大规模运行的Hadoop 服务的挑战和成本。这些基于云服务的解决方案也可以从云服务的其他功能中获益,如动态配置、计算和存储的灵活性以及在多个地区的可用性。

Ashish 在开始谈论时说到,现在数据的性质,包括海里的交互数据,都是非结构化的。而不仅仅是我们长期以来传统应用程序里处理数据结构化数据。

分析的性质也发生了改变。Ashish 谈到了分析值从描述性向规范性分析的发展。

  • 描述性分析(发生了什么?)
  • 诊断性分析(为什么发生?)
  • 预测性分析(将会发生什么?)
  • 规范性分析(我们怎样才会让它发生?)

云提供很多好处,如按需和弹性扩展架构,高可扩展的对象存储和处理,和自适应的基础设施。使用云大数据平台提供更快的生产时间、敏捷和基础设施的灵活性以及显著降低成本。

Virtual Private Cloud (VPC) 提供隔离访问计算和存储,以及提供安全实践。VPC 的安全性包括云存储中的数据和网络数据,以及基于访问计算和存储的角色加密选项。

现代数据处理平台包括多个处理引擎,可以处理各种案例,如下面列举出:

  • 复杂批次处理 SQL,Hive
  • 数据科学,Spark
  • 简单交互 SQL 查询,Presto
  • 批量数据清洗(ETL),Map Reduce

Ashish 还谈论了基于云平台的大数据参考架构,包括多租户数据访问、引擎统一、云计算服务和可移植性服务等。他总结报告说,Hadoop 作为一种服务提供在大数据架构决策时是一个吸引人眼球的选择。

查看英文原文 Elephant in the Cloud - Hadoop as a Service

2016-05-15 19:002548
用户头像

发布了 43 篇内容, 共 29.5 次阅读, 收获喜欢 7 次。

关注

评论

发布
暂无评论
发现更多内容

【计算机内功修炼】九:程序员应如何理解协程

码农的荒岛求生

线程 操作系统 进程 协程

保持前进

Nydia

AI数学基础之:奇异值和奇异值分解

程序那些事

人工智能 机器学习 程序那些事 矩阵运算

关于MVCC,我之前写错了,这次我改好了!

艾小仙

Java MySQL 数据库 面试 MVCC

地表建筑物识别 Dayo2

IT蜗壳-Tango

七日更 28天写作 2月春节不断更

工作中当你感觉焦虑的时候,该怎么办?

一笑

28天写作

产品经理训练营-第五周作业

月亮 😝

28天瞎写的第二百四十二天:正念冥想,我要想什么?

树上

冥想 28天写作 正念

翻译:《实用的Python编程》02_04_Sequences

codists

Python 人工智能 面试 数据结构与算法 序列

将上周写的用例画成流程图-第四章,第三讲

mas

用例画成流程图 - 第四章,第三讲总结

mas

悟透前端 | javascript数组之includes、reduce

devpoint

ES6 includes reduce

极客大学·产品经理训练营·第四章作业(第五周)

二大爷

极客大学产品经理训练营

「产品经理训练营」第五周 作业记录

周玲

索引失效的场景

new life

MySQL 索引性能

深度集成 Flink: Apache Iceberg 0.11.0 最新功能解读

DataFunTalk

2021金三银四必备:Java后端开发面试总结【25个技术专题】

比伯

Java 编程 架构 面试 计算机

框架效应如何影响人的决策?「Day 4」

道伟

心理 决策 28天写作

Elasticsearch Validate API

escray

elastic 七日更 28天写作 死磕Elasticsearch 60天通过Elastic认证考试 二月春节不断更

圈子创业

张老蔫

28天写作

第十三周学习心得

cc

设计模式【2.2】-- 工厂模式怎么演变成抽象工厂模式?

秦怀杂货店

设计模式 工厂模式 23种设计模式 工厂方法模式

现在与以前的你相遇在此刻,让二种不同的风格,创造未来你自己的手艺吧。

叶小鍵

改变认知,到写作方式的改变

数列科技杨德华

28天写作

第十三周命题作业

cc

面试中经常问到的动态代理到底是什么

废材姑娘

Java

使用 Tye 辅助开发 k8s 应用竟如此简单(五)

newbe36524

微服务 netcore 全链路追踪 dotnet dapr

产品经理训练营-第五周学习总结

月亮 😝

程序员的职业生涯与赛道选择

刘旭东

职业规划 码农 职业生涯

电商平台:收货地址

worry

电商平台

Linux c 开发 - 内存管理器ptmalloc

赖猫

Linux 后台开发 内存管理

云中巨象——作为一种服务的Hadoop_服务革新_Srini Penchikala_InfoQ精选文章