向 Kylin 添加实时 OLAP 能力 PDF 文档

发布于 2022-12-29 19:37:25 字数 590 浏览 110 评论 0

Apache Kylin 在诞生之初,主要目的在于解决海量数据上进行交互式数据分析的需求,数据源主要来自于数据仓库(Hive),数据大都是历史的而非实时的。流式数据处理是一个大数据开发的新兴领域,它要求数据一旦进入系统即刻可被查询。

直到 v2.6 版本,Apache Kylin 的主要能力仍然发挥在历史数据分析的领域,即便是 v1.6 引入的准实时数据摄入,依然有数分钟的延迟,难以满足对流式数据的实时查询需求。为了紧跟大数据开发的发展步伐,eBay 的Kylin 开发团队(allenma,mingmwang,sanjulian,wangshisan 等)基于 Kylin 开发了Real-time OLAP 的特性,实现了 Kylin 对 Kafka 流式数据的实时查询;此功能在 eBay 内部已经用于生产,并稳定运行超过一年时间,于 2018 年下半年开源,与社区共同改进和完善。

下载地址:https://www.wenjiangs.com/wp-content/uploads/2022/12/Kylin_Realtime_OLAP.zip

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据

关于作者

0 文章
0 评论
22 人气
更多

推荐作者

安静被遗忘

文章 0 评论 0

喔爱吃橙子

文章 0 评论 0

草莓味的萝莉

文章 0 评论 0

梦里兽

文章 0 评论 0

mb_83J3Cyxa

文章 0 评论 0

时间海

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文