课程简介

全新的版本!全新的内容!Flink 实时数仓项目 4.0 带来全新升级,完全对标企业实际开发场景,为你带来不一样的学习体验!

本套项目教程以电商采集项目为前置基础,整体内容分为三大部分:实时数仓架构介绍、数仓模型搭建、Suger 可视化大屏展示。教程通过精炼的业务体系逻辑,带你快速掌握实时数仓所使用的技术手段。使用到的框架包括:Hadoop、Kafka、Flume、Maxwell、Flink、HBase、Redis、Doris、Suger、StreamPark 等。

相较于 Flink 实时数仓项目 3.0 版本,本项目采用企业级分模块开发部署方式,使用了新版的 Flink 1.17,自主部署了 GitLab,同时采用 GitFlow 任务流的形式,来对整体项目进行版本控制,最终采用 StreamPark 框架,将整个项目在线部署至 YARN 集群,提供在线监控、自动告警等功能。

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。