写点什么

Apache Kylin v1.6.0 正式发布

  • 2016-12-11
  • 本文字数:1125 字

    阅读完需:约 4 分钟

Apache Kylin 社区非常高兴地宣布,继 1.5.0 后的又一个主要发行版 v1.6.0 于日前正式发布。

Apache Kylin 是一个开源的分布式分析引擎,提供 Hadoop 之上的 SQL 查询接口及多维分析(OLAP)能力,支持对超大规模数据进行秒级查询。

Apache Kylin v1.6.0 带来了更可靠更易于管理的从 Apache Kafka 流中直接构建 Cube 的能力,使得用户可以在更多场景中更自然地进行数据分析,使得数据从产生到被检索到的延迟,从以前的一天或数小时,降低到数分钟。

全新的流式构建引擎

全新的 Apache Kylin 流式构建引擎是在 Kylin v1.5 的"可插拔 "架构下的一个完美实现︰ 将 Kafka 主题视为一种数据源,实现相应的适配器,将数据先抽取、转换和保存到 HDFS,接下来使用各种 Kylin 的构建引擎(MR/Spark 等)对数据进行并行计算 。

Kylin 将开始 / 结束消息的偏移量(offset)计入了每个 Cube segment,并使用偏移量作为分区值,从而对于早到达和晚到达的消息最终都能够被检索到,从而保证了查询结果的准确性。

此外,Kylin ODBC Driver 也发布了新的 1.6 版本,对 Tableau、PowerBI 和 Cognos BI 有了更好支持。

在这一版本中 Apache Kylin 社区一共解决了 102 个 issue,包括 Bug 修复,功能增强及一些新特性等。主要 issue 有:

[KYLIN-1726] - 可伸缩的流式 Cube 构建

[KYLIN-1917] - TopN 性能增强

[KYLIN-1919] - 支持 Kafka 的嵌入格式的 JSON 消息

[KYLIN-2012] - 可靠同步 hive 表模式更改

[KYLIN-2054] - 支持更多 Kafka 消息的时间戳格式

[KYLIN-2055] - 增加 Boolean 编码

[KYLIN-2070] - 支持多 segment 并行构建/合并/刷新

[KYLIN-2082] - 支持更新流式表模式和配置的修改

下载安装:

下载 Apache Kylin v1.6.0 源代码及二进制安装包,请访问下载页面。

升级:

此版本的元数据向前兼容,请参考 https://kylin.apache.org/docs16/howto/howto_upgrade.html"> 升级指南进行升级 %E8%BF%9B%E8%A1%8C%E5%8D%87%E7%BA%A7)。

获得支持

升级和使用过程中有任何问题,请:

提交至 Kylin 的 JIRA: https://issues.apache.org/jira/browse/KYLIN/

或者

发送邮件到 Apache Kylin 邮件列表: user@kylin.apache.org 和 dev@kylin.apache.org

感谢每一位朋友的参与和贡献!

作者介绍

史少锋,Kyligence 技术合伙人 & 资深架构师 Apache Kylin 核心开发者和项目管理委员会成员(PMC),专注于大数据分析和云计算技术。曾任 eBay 全球分析基础架构部大数据高级工程师,IBM 云计算部门软件架构师;曾是 IBM 公有云 Bluemix dev&ops 团队核心成员,负责平台的规划、开发和运营。


感谢杜小芳对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ @丁晓昀),微信(微信号: InfoQChina )关注我们。

2016-12-11 18:002264

评论

发布
暂无评论
发现更多内容

数据交换不失控:华为云EDS,让你的数据你做主

华为云开发者联盟

云计算 华为云 华为云开发者联盟 企业号 7 月 PK 榜

C++的list-map链表与映射表

芯动大师

磁盘阵列(RAID)是什么?RAID有什么好处?

百度搜索:蓝易云

Linux 阿里云 云服务器 硬盘 阿里云、

毕马威:中国算力关联产业规模可达24万亿元|报告

B Impact

【实用教程】Linux系统Windows系统硬盘扩容教程

百度搜索:蓝易云

Linux 运维 服务器 云服务器 服务器租用

微服务之服务器缓存

Disaster

微服务

华为云河图KooMap:夯实数字孪生底座,点燃燎原星火

华为云开发者联盟

人工智能 华为云 华为云开发者联盟 企业号 7 月 PK 榜

克服困难、提升学习效率的关键方法

叶小鍵

BFF网关模式开发指南

WizInfo

从钢铁行业数字化管控平台的智能进化,看超自动化能力边界

王吉伟频道

RPA 数字化转型 超自动化 业务流程自动化 钢铁行业

一文搞懂常见的加密算法 | 社区征文

盐咔咔

网络 加密算法 年中技术盘点

IoTOS-v1.2.1接入J-IM(t-io)后台通知App

开源物联卡管理平台-设备管理

物联网平台 IoT 开源物联网 国产开源 开源项目介绍

Linux升级命令yum upgrade和yum update,有什么区别?

百度搜索:蓝易云

云计算 Linux 服务器 云服务器 服务器租用

开心档之Web Quality - 无障碍(WAI)

雪奈椰子

开心档之Web 品质 - 国际化

雪奈椰子

一文了解潜力黑马Infiblue:借力Web3,释放元宇宙价值

小哈区块

深度剖析线上应用节点流量隔离技术

阿里巴巴云原生

阿里云 云原生 流量隔离

走向 Native 化:Spring&Dubbo AOT 技术示例与原理讲解

阿里巴巴云原生

spring 阿里云 云原生 dubbo native

IoTOS-App(移动端) v0.1.0 免费开源 | 商用

开源物联卡管理平台-设备管理

物联网平台 IoT 开源物联网 国产开源 开源项目介绍

一文熟知网络 – 文章巨长,但是很详细

邹志全

网络编程 计算机网络 架构设计

一文了解潜力黑马Infiblue:借力Web3,释放元宇宙价值

威廉META

代码随想录 Day11 - 栈与队列(中)

jjn0703

Docker学习路线1:介绍

小万哥

Docker 程序员 容器 后端 开发

2023-07-09:给定N、M两个参数, 一共有N个格子,每个格子可以涂上一种颜色,颜色在M种里选, 当涂满N个格子,并且M种颜色都使用了,叫一种有效方法。 求一共有多少种有效方法。 1 <= N,

福大大架构师每日一题

福大大架构师每日一题

Centos7x设置服务器禁ping【实用】

百度搜索:蓝易云

云计算 Linux 运维 ping

通俗易懂数仓建模—Inmon范式建模与Kimball维度建模

五分钟学大数据

大数据 数据仓库 维度建模

暗黑2能用Java开发?还能生成APP?

烧霞

游戏开发 java17

一文了解潜力黑马Infiblue:借力Web3,释放元宇宙价值

西柚子

数据增强之裁剪、翻转与旋转

timerring

人工智能

基于云原生网关的全链路灰度实践

阿里巴巴云原生

阿里云 微服务 云原生

链上衍生品协议 ProsperEx:探索 RWA 叙事,打造 DeFi 变异黑马

股市老人

Apache Kylin v1.6.0正式发布_语言 & 开发_史少锋_InfoQ精选文章