9月30日,2017年Data Conference Taiwan(简称DataCon.TW)在台湾顺利举办且成果丰硕。今年的DataCon.TW邀请了台湾四位本土Apache Committer为大家分享成为Apache Committer的心路历程,还邀请了首个来自华人团队的Apache 顶级项目Apache Kylin Committer施继成作Keynote演讲,介紹了Apache Kylin 2.0的最新特性及相关技术细节 ,以及如何从经典的OLAP发展为实时数据仓库解决方案。
DataCon.TW前身是台湾规模最大的、连续举办过8届的大数据技术研讨会——HadoopCon,今年第九届大会由台湾资料科学协会发起,并更名为DataCon.TW,将会议规模进一步扩大为Hadoop、Spark、Flink及大数据相关领域的研讨会。
施继成在其《Apache Kylin 2.x-From Classic OLPA to Realtime Data WareHouse》的专题演讲中,介绍了Apache Kylinv 重大新特性的更新,例如查询下压(SQL Pushdown),以及 全面支持的雪花模型、Spark构建引擎等。这些特性使Apache Kylin可以支持更加复杂的数据模型和灵活的业务场景,推动Apache Kylin从Hadoop上的OLAP分析引擎到数据仓库的演变。
同时介绍了Kylin on Cloud的动态,目前,Kylin技术已在亚马逊AWS云平台及微软Azure 云平台上线,其一键部署及高性能、高并发、高可用的弹性大数据分析服务,可为全球企业级用户提供更加灵活、便捷、高效的云上大数据管理及分析平台;在分享中,施继成展示了使用KyBot为Kylin应用进行在线诊断及优化等内容,通过在线服务进一步帮助用户更好的使用Kylin。以下为施继成演讲的部分PPT实录:
Apache Kylin v2.x提供了更多新特性与更快的Cube构建速度。
全面支持雪花模型:
查询下压(Query Pushdown):
Spark 构建引擎:
此外,Kylin技术在云端也已开始应用:
KyBot在线诊断及优化:
关于Kyligence
Kyligence由首个来自中国的Apache软件基金会顶级开源项目ApacheKylin核心团队组建,是专注于大数据分析领域创新的数据科技公司 。Kyligence提供基于Apache Kylin的企业级大数据智能分析产品Kyligence Analytics Platform (KAP),在线智能诊断和调优服务Kyligence Robot等。其云产品Kyligence Cloud也已经在AWS、Azure等云平台上线。目前,Kyligence已赢得了海内外多家金融、保险、证券、电信、制造、零售、广告等企业级客户。
网友评论