精研技术、渴望拓宽
技术面的
大数据从业人员
对大数据感兴趣
希望能了解一整套
简单易行的
大数据体系的IT从业者
从未接触过开发
目标突破自我
IT小白人群
熟悉RDS、DataHub
DataWorks
DataV、QuickBI
等基础框架
掌握阿里云常用大数据技术框架
掌握基于阿里云服务器进行离线数据仓库和实时数据仓库的搭建
了解阿里云的大数据组件的协调使用
采用Flume采集用户行为日志数据,适配组件全面调研,详尽配置文件和脚本解读;
采用DTS对业务数据库中的数十张业务数据表分不同的同步策略进行采集同步;
使用MaxCompute作为核心计算引擎搭建离线数据仓库,分析离线指标体系;
采用实时计算模块+DataHub作为核心计算引擎搭建实时数据仓库,分析实时指标体系;
分别采用DataV、QuickBI对结果数据执行可视化大屏展示;
采用DataWorks作为调度工具对计算任务执行定时调度,并进行安全监控。