学途无忧

标题: 玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版 [打印本页]

作者: admin    时间: 2020-2-19 23:19
标题: 玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版


第1章 课程导学与学习指南
本章中将向大家介绍课程能学到什么、解决什么实际问题、项目成果展示,课程整体安排以及如何学习更高效。

第2章 认识企业中的大数据平台
为什么要有大数据平台?大数据平台究竟是为了解决什么问题产生的?如何判断一个大数据平台的好坏?在设计一个数据平台时,需要注意哪些,有什么步骤。各大企业现有的解决方案有哪些,常见的技术栈有哪些,我们自己设计的这个通用的大数据平台是什么结构。...

第3章 大数据平台 —— 数据仓库之离线&实时
你真的理解数据仓库是什么吗?数据仓库如何进行分层,为什么要分层呢?分层一定好吗?带你理解数据仓库,逐步掌握离线数仓工具Hive。对比离线数仓和实时数仓,了解实时数仓常见架构。

第4章 大数据平台——数据仓库之权限管理
解决三大问题:数仓安全问题,对比常见权限认证框架,使用Ranger开发数仓权限模块;数据来源问题,对常用数据采集工具进行介绍,使用DataX进行数据采集;数仓管理问题,介绍数据治理的概念及ApacheAtlas

第5章 大数据平台 —— 调度系统
解决离线批处理任务的定时执行问题,对主流调度框架Azkaban进行架构介绍、特性讲解和部署应用。通过Java程序调用Azkaban相关接口,实现创建任务、调度任务功能,实现API接口封装

第6章 大数据平台 —— 计算引擎
平台的计算引擎是基于Spark构建的,依托了Yarn进行资源调度。本章从Spark架构、核心介绍及部署开始,进行Spark部分开发。之后接入Spark SQL模块。最后介绍了Spark的一些高阶调优技巧。

第7章 大数据平台建设 —— SQL查询引擎
介绍SQL On Hadoop 方案。对Presto架构和应用做了一些介绍,利用Presto作为底层的SQL查询引擎,实现快速查询和多数据源查询。涉及Presto的配置优化,自定义函数、EventListener、以及通用UDF的开发,最后完成Presto On Yarn部署

第8章 大数据平台建设 —— 监控预警
集群监控能提高资源利用率,有效管理整个集群,本章对常见集群的预警方案做了介绍和应用,最后通过Ganafa展示项目监控数据

第9章 大数据平台建设 —— 管理整合、任务定制
整合前面章节中开发的数仓管理功能,整合数仓权限、数据治理和数据采集,通过界面化配置实现数据采集任务定制。实现任务调度功能,实现shell命令、JAVA程序、Python程序、Spark程序的运行和管理

第10章 系统集成及可视化
实现多引擎的数据查询及可视化模块,生成图表进行展示。将前面的数据仓库、调度系统、SQL引擎、计算引擎、预警监控系统、元数据管理系统等等,如何将他们集成到一起构建大数据平台




作者: 混乱牧师    时间: 2020-2-20 21:12
666666666666
作者: Yoey    时间: 2020-2-21 14:42
感谢分享
作者: yangjiajun    时间: 2020-2-21 15:13
谢谢楼主的分享!
作者: cccccc    时间: 2020-2-21 18:43
感谢分享!!!!!!
作者: xulei    时间: 2020-2-22 13:36
谢谢楼主分享
作者: xiao123    时间: 2020-2-24 22:32
谢谢分享
作者: a2439561    时间: 2020-3-2 07:52
666666666666666
作者: 695157144    时间: 2020-3-5 13:46
不错不错
作者: sunyajun1988    时间: 2020-3-6 12:02
感谢分享
作者: ray1234    时间: 2020-3-6 14:55
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: johe    时间: 2020-3-6 17:58
查看一下。
作者: guodong5686    时间: 2020-3-7 09:28
1312e12r12qr1q2rq12
作者: jason2k    时间: 2020-3-7 20:25
企业级思维 开发通用够硬的大数据平台 [修改
作者: UsingStuding    时间: 2020-3-8 19:15
成熟又热门的技术,快忍不住要去学习
作者: VaderWang    时间: 2020-3-8 20:16
哈哈哈哈哈哈哈哈哈哈哈哈
作者: wuyascnu    时间: 2020-3-9 09:52

作者: shyshysky    时间: 2020-3-10 08:23
学习一下
作者: zhoujun123456    时间: 2020-3-10 15:11
6666666666666
作者: yongbuyanqi    时间: 2020-3-12 10:54
谢谢分享
作者: Annd    时间: 2020-3-12 20:57
谢谢楼主的分享!
作者: sunset9083    时间: 2020-3-12 23:38
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: maxemanon    时间: 2020-3-15 22:40
谢谢分享
作者: haimianbaobao    时间: 2020-3-16 19:44
时代法国红酒看来人推哦了
作者: 烂笔头w    时间: 2020-3-18 08:49
1111111111111111111111111111111111111
作者: qiuzhenfan    时间: 2020-3-18 21:03
谢谢楼主分享,辛苦辛苦
作者: cddsg    时间: 2020-3-20 11:29
楼主给力,给力,给力,给力
作者: cloudy    时间: 2020-3-20 20:32
thx very much!
作者: chyueyi    时间: 2020-3-21 14:36
玩转热门框架 用企业级思维 开发通用够硬的大数据平台 [修改]
作者: s459126865    时间: 2020-3-21 15:09
RE: 玩转热门框架 用企业级思维 开发通用够硬的大数据平台 [修改]

作者: shadongjun    时间: 2020-3-21 17:35
谢谢  学习
作者: 甜lemon    时间: 2020-3-23 16:53
6666666
作者: xuetuwuyou2017    时间: 2020-3-26 21:46
6666666666
作者: zybniubi    时间: 2020-3-26 23:00
666666666666666666666
作者: bll    时间: 2020-3-27 08:58
66666666666666666
作者: 18610634520    时间: 2020-3-28 21:25
6666666666666666666
作者: liudafan    时间: 2020-3-28 22:35
wewe沃尔沃二翁任务
作者: lijm1206    时间: 2020-3-29 00:30
感谢分享
作者: wjl7813    时间: 2020-3-29 15:20
xiexie11111111111111111111111111
作者: leizeonban    时间: 2020-3-29 21:38
111111111111111111
作者: glannv    时间: 2020-3-30 12:13
111111111111111111
作者: 喂这填什么    时间: 2020-3-30 13:26
Java架构师成长直通车
作者: yqhan    时间: 2020-3-31 10:07
666666666666666666666666666666666666
作者: maxfine    时间: 2020-3-31 18:53
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: hnfjj    时间: 2020-3-31 19:43
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: SirHumphrey    时间: 2020-4-1 16:59
哈哈哈哈哈哈哈哈哈哈或或或或或或或
作者: 1098544251    时间: 2020-4-2 17:27
感谢分享
作者: huanghao2693    时间: 2020-4-3 13:31
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: wanghui1234    时间: 2020-4-3 15:40
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: elin0512    时间: 2020-4-3 22:09
6666666666666666666666666666666666
作者: xtwyzh    时间: 2020-4-4 22:42
很好的资源,进来看看哦。
作者: travpro    时间: 2020-4-5 01:46
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: xuetu2000    时间: 2020-4-5 07:47
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: zthzththth    时间: 2020-4-5 14:59
玩转热门框架 用企业级思维 开发通用够硬的大数据平台 [修改]
作者: 青峰1110    时间: 2020-4-5 23:23
1111111111111111111111111111111111111111
作者: ittimeline    时间: 2020-4-6 11:03
RE: 玩转热门框架 用企业级思维 开发通用够硬的大数据平台 [修改]

作者: miriamyy    时间: 2020-4-6 11:30
谢谢楼主的分享!
作者: xing212    时间: 2020-4-6 11:34
支持分享
作者: huqingsong    时间: 2020-4-6 16:16
第6章 大数据平台 —— 计算引擎第6章 大数据平台 —— 计算引擎第6章 大数据平台 —— 计算引擎第6章 大数据平台 —— 计算引擎
作者: backe    时间: 2020-4-6 16:28
感谢楼主提供
作者: rooffy    时间: 2020-4-6 16:28
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: za1275952454    时间: 2020-4-6 16:35
666666666666666666666666666666
作者: xuezhen0710    时间: 2020-4-6 17:38
感谢分享
作者: qyx123    时间: 2020-4-7 11:02
集群监控能提高资源利用率
作者: hadoop    时间: 2020-4-10 21:53
玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版 [修改]
作者: MrCvcNkf    时间: 2020-4-11 14:18
222222222222222222222222222222222
作者: readm    时间: 2020-4-12 22:47
阿斯顿撒旦撒阿三阿三
作者: shoven    时间: 2020-4-13 17:39
ddddddd哒哒哒哒哒哒
作者: aiur    时间: 2020-4-13 18:52
aiur,如果您要查看本帖隐藏内容请回复
作者: fantasy    时间: 2020-4-13 22:30
感谢分享。
作者: neal    时间: 2020-4-16 09:00
支持楼主大人了
作者: Raymon821    时间: 2020-4-16 13:17
玩转热门框架玩转热门框架
作者: 竹韵飘香    时间: 2020-4-25 15:11
66666666666666
作者: Superset    时间: 2020-4-25 18:56
你点的那份水电费水电费
作者: Tuwei    时间: 2020-4-25 21:49
谢分享...
作者: 1468697939@qq    时间: 2020-4-26 09:12
6666666666666666
作者: 1468697939@qq    时间: 2020-4-26 09:41
6666666666666666
作者: 睡睡不睡    时间: 2020-4-29 22:04
感谢分享~~~~
作者: 1468697939@qq    时间: 2020-4-30 09:20
66666666666666666666
作者: 小杰是猎人    时间: 2020-4-30 21:02
谢谢楼主的分享!

作者: xiao    时间: 2020-5-2 22:00
感谢分享
作者: 休息中请勿    时间: 2020-5-4 22:54
12312312321312312
作者: 62638417    时间: 2020-5-7 22:23
大叔大婶
作者: weir2020    时间: 2020-5-9 15:26
可以下载了
作者: 苏北    时间: 2020-5-21 15:04
查看啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊
作者: A11D22    时间: 2020-5-21 18:07
6666666666666
作者: 871051248    时间: 2020-5-26 10:46
大数据平台
作者: kewang0427    时间: 2020-5-27 18:52
谢谢分享谢谢
作者: yuanhang    时间: 2020-5-31 01:57
666666666666666666666666666
作者: 123123    时间: 2020-6-6 15:44
很好很强大
作者: i4cll    时间: 2020-6-8 09:53
能下载吗?
作者: yehehui    时间: 2020-6-10 10:03
开发通用够硬的大数据平台
作者: UlissesJR    时间: 2020-6-15 11:23
玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版
作者: 18888    时间: 2020-6-19 17:28
E: 玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版 [修改]
作者: 18888    时间: 2020-6-19 17:28
玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版 [修改]
作者: 18888    时间: 2020-6-19 17:28
门框架 用企业级思维 开发通用够硬的大数据平台
作者: digu    时间: 2020-6-19 17:40
玩转热门框架 用企业级思维 开发通用够硬的大数据平台 完整版95

作者: 啊切    时间: 2020-6-20 08:58
E: 玩转热门框架 用企业级思维 开发通用够硬的大数据平台
作者: studystate8    时间: 2020-6-20 09:16
学习一下。
作者: cfq615    时间: 2020-6-20 09:54

感谢分享




欢迎光临 学途无忧 (http://xuetu123.com/) Powered by Discuz! X3.2