Spark实时数仓项目

本Spark实时数仓项目依托企业级真实的实时数据分析环境，对目前互联网大厂中常见的实时分析场景提出了一套广泛实用的技术解决方案。本项目以Spark为核心技术引擎，联合使用了多种大数据流行计算框架，例如Kafka、Canal、Maxwell、ElasticSearch、Redis、Kibana等。

为应对不同的流式数据采集场景，本项目给出了多种MySQL变动数据采集方案，并给出详尽的框架安装部署过程和代码解读流程。项目全程使用SparkStreaming作为实时计算引擎，使用Scala作为开发语言，简洁高效，贴近Spark开发背景。