应用背景
云和大数据时代,信息技术革命正在不断催生新的产业升级热潮,企业将现有应用系统、分析日志、业务数据等迁移至云端,无论是公有云还是私有云,已是大势所趋。而当数据上云之后,怎么在云上利用这些数据、高效进行分析,成为企业必然面临的一个问题。
作为一家专注于大数据分析领域创新的数据科技公司,同时也是微软在中国 Azure 镜像市场的第一批大数据供应商、微软联合销售(Co-Seller)合作伙伴以及上海微软加速器第一期成员,Kyligence 公司携手由世纪互联运营的微软智能云 Azure 平台,为 Azure 云平台百亿级以上超大规模数据集提供亚秒级标准 SQL 查询能力,继而为业务用户、分析师及工程师提供简单、快捷的大数据分析能力,使得数据分析能够快速响应业务变化。
为在超大规模数据集上向客户提供更为快速的数据访问服务,帮助用户获得极速的洞察能力,Kyligence 联合 Azure 智能云平台,以其基于 Apache Kylin 的企业级产品 Kyligence Analytics Platform(KAP),与 Azure HDInsight 产品进行了功能整合。KAP 是一套标准的 DW on Hadoop,不仅将传统数据仓库、商务智能等技术能力迁移到了以 Hadoop 为主的大数据技术平台上,还提供了高性能、高并发、易于使用、无缝整合 BI 工具等特点。
目前,KAP 完全兼容 Azure HDInsight。在 Azure 上,KAP 不仅支持一键部署,还可以与 Azure HDInsight 组成数据分析的价值矩阵,为用户带来高速、可靠、高并发的数据分析服务,以及快速的交互式查询——在秒级的时间内获得查询结果,真正释放数据价值,驱动业务增长。
平台支持
作为中国首个 Apache 顶级项目 Apache Kylin 贡献者组建的创业公司,Kyligence 具有国际化的视野与开阔的格局,公司从创立伊始就清晰地知道“上云”是必然的趋势。本着为客户释放最大价值的原则,Kyligence 在帮助客户寻求将传统的数据仓库、BI 的能力转移到云端的路径时,设立了一套极为严苛的考量标准——为凸显合作后带给用户的技术红利,必须与第一梯队的云供应商合作;为了让每一位用户都有机会使用云上大数据分析服务,必须尽量选择不与客户业务相冲突的企业合作;为创造更好的解决方案,必须要求云供应商拥有完整的云生态。Azure 在 Kyligence 多层面的综合考量中,以最大程度的需求契合度脱颖而出。
Azure 上 KAP 的快速部署
Azure 中国镜像市场上线了 Kyligence 企业级解决产品 KAP 的镜像——用户可以在 Azure 上方便地使用该镜像。利用 Azure Template 和 Kyligence 的脚本,用户可以在短短几十分钟内创建一个基于 Azure HDInsight 的 Hadoop 集群,一键部署一个完整的端到端的 DW on Hadoop 集群。其中,所有的部署、安装和配置工作都将在 Azure 上自动为用户完成。

KAP 已经上线微软智能云 Azure 平台
Azure HDInsight 与 KAP 的功能整合
Azure HDInsight 是一个完全托管的云 Apache Hadoop 服务,具备 99.9% SLA 保障的优化型开源分析群集。作为云技术驱动的 Hadoop 发行版,HDInsight 架构能够处理任何数量的数据,按需将数据处理容量从数 TB 扩展至数 PB 级别。用户可以随时快速创建任意数量的节点。Kyligence KAP 通过与 Azure HDInsight 功能的整合,将大数据技术和 Azure ISV 应用程序部署统一构建成受企业级保护和监视的托管群集,提供云上超高性能的分析访问的服务,可稳定在秒级内把基于几十亿记录的数据查询结果快速反馈给客户。
结合数据分析师工具
在Azure上,KAP 与分析师经常使用的工具能够做到无缝集成。最典型的案例就是把 Excel 与 KAP 联合起来做数据分析。当然 Excel 只是其中一部分,目前,包括 Power BI、Tableau 等分析工具都可直接连到云上的数据服务,让分析师能够更快地进行数据分析。

KAP 可与 Excel 无缝集成做数据分析
流式处理与分析
相比于其他大数据平台,Kyligence 的其中一大技术优势在于可以直接对接 Kafka 这样的流式数据输入。Kafka 数据流可以通过相应的适配器映射为一张逻辑的表结构,将数据直接落地到 HDFS,接下来使用 Kylin 的构建引擎对数据进行并行计算。最显著的成果是使用户的数据从产生到被检索的延迟从以前的一天或数小时,降低到数分钟,这种分析能力是用户可以实时看到的结果,例如在新闻、社交媒体等场景中,用户可以马上体验到区别。
优势拓展
通过由世纪互联运营的微软智能云 Azure 平台对 Kyligence 技术的支撑与整合,Kyligence 得以为客户提供更为优秀的产品与服务方案,并在帮助其把传统的数据仓库和 BI 应用无缝迁移到大数据平台上时带来了明显的收益。
KAP 提供无缝迁移能力,大大降低分析师学习成本
KAP 能将传统的数据仓库和 BI 应用无缝迁移到大数据平台上,这样做能带来的好处是,这些企业的分析师可以直接通过 KAP,按照他以前的技术、能力、工具,做数据分析,而不需要学编程。
提升数据分析的规模和维度,快速分析响应用户需求
提供高性能、高并发的数据仓库。以前用户在传统数据仓库里,只能做几个维度、几亿条数据的分析,利用 Kyligence 的技术,用户可以同时在上百个维度、几百亿条数据规模的情况下,依然快速地进行大数据分析。
从私有部署到云端应用,Kyligence 满足多样数据分析需求
Kyligence 提供的企业级产品使得用户可以在私有的数据中心、公有云甚至混合云上,为不同的客户、应用等提供快速分析能力,而统一的架构、版本、部署方式等,大大降低了企业用户在迁移、部署大数据应用时候的成本。同时,Kyligence 提供的在线诊断及优化服务 KyBot,为 KAP 应用提供了智能的分析监控、调优及故障争端的能力,大大降低了企业用户采用 KAP 技术方面 DevOps 的成本,逐步实现运维自动化。