发布于 2015-09-06 15:17:41 | 172 次阅读 | 评论: 0 | 来源: 网友投递

这里有新鲜出炉的精品教程,程序狗速度看过来!

Apache Kylin OLAP 分析引擎

Kylin 是一个开源的分布式的 OLAP 分析引擎,来自 eBay 公司开发,基于 Hadoop 提供 SQL 接口和 OLAP 接口,支持 TB 到 PB 级别的数据量。


Apache Kylin 团队非常高兴宣布Apache Kylin v1.0 (incubating) 正式发布。Apache Kylin是一个分布式分析引擎,在Hadoop之上提供SQL接口及OLAP在线多维分析以支持超大规模数据集。

该版本带来了更加稳定,可靠及更好管理的版本,解决了诸多Bug,增强及新功能等47个任务。

主要变化

Kylin核心增强

  • 支持动态数据模型,在特定条件下对新增/删除字段的数据模型不需要从头构建

  • 升级Apache Calcite至1.3以修复多个Bug及支持新的SQL函数等

  • 增强了清理任务以确保Cube构建成功后在本地操作系统,HDFS/HBase等不遗留垃圾文件等

  • 添加配置项允许讲Hive中间表输出到指定数据库

  • 增强HBase Corprocessor 以提升查询性能

  • Kylin 系统仪表盘(Beta)以展现使用情况,存储及性能等指标

主要的Bug修复

  • 不能获取原始记录值,特别是使用非HDP的Hadoop版本

  • 前端缓存未及时刷新

  • 不再使用的Hive中间表会在Cube构建完成后自动删除

  • 支持大Lookup表

  • JDBC驱动,ODBC驱动及UI等Bug修复

Zeppelin 整合

Apache Zeppelin是一个类似Spark Notebook的基于web的交互式数据分析工具,Apache Kylin 团队为Zeppelin贡献了Kylin Interpreter以让Zeppelin用户能够在Notebook中与Kylin以标准SQL的方式进行交互式查询。目前已经由Zeppelin社区合并至其主代码中,有兴趣的同学可以去Zeppelin网站下载来试用。

升级

我们推荐从v0.7.x甚至更早的版本升级到该版本,以获得更好的性能,稳定性及更干净的版本(大部分中间文件将被自动回收),并且与社区保持同步以获得最新的功能及支持。

升级过程如有任何问题或疑问,请发送邮件至Apache Kylin邮件列表:dev@kylin.incubator.apache.org

感谢

本次版本发布中,除了来自eBay的核心开发团队外,更有来自美团,明略数据,广东移动等多位小伙伴的大力支持,并贡献了多个Patch及新功能。其中来自美团的高大月和明略数据的黄桦已经成为Apache Kylin committer。

感谢每一位为Apache Kylin社区贡献的朋友。



历史版本 :
Apache Kylin 2.2.0 发布,开源分布式分析引擎
Apache Kylin v2.1.0 发布,开源分布式分析引擎
Apache Kylin v2.0.0 正式版发布
Apache Kylin v2.0.0 Beta 尝鲜版上线
Apache Kylin v1.6.0 发布,使用 Apache Kafka 数据源
Apache Kylin v1.5.4.1 发布
Apache Kylin 1.5.4 正式发布,修复大量Bug
Apache Kylin 1.5.4 发布,大量修复 bug
Apache Kylin 1.5.3 正式发布
Apache Kylin v1.5.2 正式发布
Apache Kylin v1.5.1 正式发布
Apache Kylin (v1.5.0) 发布,全新设计的新一代
最新网友评论  共有(0)条评论 发布评论 返回顶部

Copyright © 2007-2017 PHPERZ.COM All Rights Reserved   冀ICP备14009818号  版权声明  广告服务