课程简介
本课程结合国内多家企业实际项目经验。从集群规模的确定到框架版本选型以及服务器选型,手把手教你从零开始搭建基于阿里云服务器的大数据集群。
采用阿里云ECS服务器作为数据平台,搭建高可用的、高可靠的Flume数据采集通道,运用阿里云DateHub构建中间缓冲队列并担任数据分发枢纽将数据推送至阿里自主研发的DataWorks对数据进行分层处理,采用MaxCompute作为处理海量数据的方案,将计算结果保存至MySQL并结合阿里的QuickBI工作做最终数据展示。
01_阿里云大学 项目课程简介,avi
02_阿里云大学 数据仓库概念,avi
03_项目需求及架构设计_项目器求分析,avi
04 项目需求及架构设计_阿里云计算框架,avi
05 项目需求及架构设计 项目技术选型,avi
06 项目需求及架构设计_系统数据流程设计,avi
07 项目需求及架构设计 服务器选型,avi
08 项目需求及架构设计 集群规模及购买服务器建议,avi
09 数据生成模块 堙点数据基本格式.avi
10_数据生成模块_事件日志数据,avi
11 数据生成模块 数据生成脚本,avi
12 数据采集模块 注册购买ECS云服务器,avi
13_数据采集模块 配置防火墻,avi
14 数据采集模块_ECS配置升级,avi
15 数据采集模块 阿里云服务器连接,avi
16 数据采集模块_配置主机名称映射,avi
17 数据采集模块_创建普通用户atguigu,avi
18 数据采集模块 集群分发脚本xsync,avi
19 数据采集模块 配置SSH无密登录.av
20 数据采集模块 集群整体操作脚本,avi
21 数据采集模块 JDK安装,avi
22 数据采集模块_日志生成,avi
23 数据采集模块_Flume安装及使用,avi
24 数据采集模块_DataHub简介,avi
25 数据采集模块 创建DataHub与Topic.avi
26 数据采集模块_Flume推送数据到DataHub.avi
27 数据采集模块 DataWorks和MaxCompute简介,avi
28 数据采集模块_ 创建工作空间,avi
29_用户行为数仓搭建_数仓分层概念,avi
30_用户行为数仓搭建_数仓分层配置,avi
31 用户行为数仓搭建_原始数据层(ODS层).avi
32_用户行为数仓搭建_DataHub推送数据到MaxCompute.avi
33_用户行为数仓搭建_dwdl层日志格式分析,avi
34_用户行为数仓搭建_自定义UDTF.av
35 用户行为数仓搭建 DWD层建表(启动日志表),avi
36 用户行为数仓搭建_手动将0DS层数据导入DWD层.avi
37_用户行为数仓搭建_DWD层数据导入脚本,avi
38 用户行为数仓搭建 手动将DWD层数据导入DWS层.avi
39_用户行为数仓搭建_DWS层数据导入脚本.avi
40_用户行为数仓搭建_ADS层脚本及日活需求:全流程业务调度,avi
41_业务数仓理论_表的分类,avi
42_业务数仓理论_表的同步策略,avi
43_业务数仓搭建_业务数仓架构图,avi
44_业务数仓搭建_RDS服务器准备,avi
45_业务数仓搭建_创建业务数据库及表,avi46_业务数仓搭建_ODS层数据表创建,avi47_业务数仓搭建_建立数据同步节点.avi
48_业务数仓搭建 每日全量表同步,avi49_业务数仓搭建_每日增量表同步,avi
50_业务数仓搭建_每日新增及变化表同步,avi51_业务数仓搭建_ODS层调度,avi52_业务数仓搭建_DWD层建表语句,avi53_业务数仓搭建_手动将数据导入DWD层,avi54_业务数仓搭建_DWD层数据导入脚本,avi55 业务数仓搭建_DWS层建表及脚本编写.avi
56_业务数仓搭建_ADS层建表及手动导入数据,avi
57_业务数仓搭建_作业调度,avi
58_业务数仓搭建_作业调度执行,avi
59 数据导出与作业调度 创建商品销售数据同步节点,avi
60_数据导出与作业调度_创建同步节点及作业调度,avi
61 数据导出与作业调度 业务数仓全流程作业调度,avi
62 _数据可视化_DataV简介,avi
63_数据可视化_购买QuickBl.avi
64_数据可视化_各个渠道日活占比图_配置数据源,avi
65_数据可视化_各个渠道日活占比图 配置数据集,av66 数据可视化 各个渠道日活占比图_配置饼图仪表盘,avi
67 数据可视化 地区销售额分析,avi
68 数据可视化 年龄段销售额占比分析,avi
69_数据可视化 热门商品分析,avi
70_数据可视化_分享仪表盘,avi
71 数据可视化 数据门户(高级版)简介,avi
72_协同工作_RAM管理界面.avi
73 协同工作 RAM账号如何登录.avi
74_阿里云大学 项目总结,avi
评论(0)