近日 Kylin v2.6.4 版本发布,包含很多问题修复与各种改进。翻阅三年前写的Kylin测试文档,当时版本还是1.5.3。近两年 Kylin 版本迅速迭代,社区不断发展,已经成为 Hadoop 生态中不可或缺的 OLAP 引擎。
01
Kylin 介绍
Apache Kylin(麒麟)是由eBay开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据。Kylin 能够实现海量数据的秒级甚至亚秒级查询,主要依赖其预计算与构建Cube的能力。
Kylin底层数据存储在HBase中,数据输入与cube building主要是Hive、Kafka,或者JDBC数据源(v2.3.0 版本),如下图所示:
02
Kylin功能和特性
- 超快的大数据OLAP引擎,能够降低百亿数据规模下的查询延时。
- SQL查询能力。支持ANSI SQL查询接口,提供了大部分SQL查询功能。
- 交互式查询能力。查询延时控制在亚秒级,为Hadoop提供交互式查询能力。
- 多维立方体。使用kylin为百亿以上数据集定义数据模型并构建立方体。
- 实时OLAP能力,Kylin可以在数据产生时进行实时处理,用户可以在秒级延迟下进行实时数据的多维分析。
- BI工具无缝集成,目前能够与 Tableau、PowerBI等工具集成。
03
相关资源
官方文档
学习 Kylin 建议重点参考官方文档。包含安装部署、Cube构建教程、工具集成等。
http://kylin.apache.org/docs/
另外,Kylin 还提供了中文版官网,如果你阅读英文文档有困难,可以访问:
http://kylin.apache.org/cn/docs/
源码地址
https://github.com/apache/kylin
开发、用户邮件
dev@kylin.apache.org,user@kylin.apache.org
订阅方式:发送邮件到 user-subscribe@kylin.apache.org 或 dev-subscribe@kylin.apache.org 进行订阅。
END
猜你喜欢
如何做好 Elasticsearch 性能指标监控
全网最细致的 HBase 内核解析
基于Telegraf Influxdb Grafana的监控平台介绍
扫一扫下方二维码,更多精彩内容陪伴你.
告诉别人你「在看」 ▼