《Spark 1.X 大数据平台V2》炼数成金大数据视频教程 11月份班 10周课程完整版,全套视频教程学习资料通过百度云网盘下载

admin

资源详情



课程介绍《Spark大数据平台》      本课程内容全面涵盖了Spark生态系统的概述及其编程模型，深入内核的研究，SparkonYarn,SparkStreaming流式计算原理与实践
SparkSQL,基于Spark的机器学习，图计算，Techyon,Spark的多语言编程以及SparkR的原理和运行。面向研究Spark的学员，它是一门非常有学习指引意义的课程。
时间：共10周

-------------------课程目录-------------------

第一周Spark生态系统概述与编程模型  Spark生态系统概述
  回顾HadoopMapReduce
  Spark运行模式
  RDD
  Spark运行时模型简介
  缓存策略介绍
  transformation
  action
  lineage
  容错处理
  宽依赖与窄依赖
  集群配置

第二周深入Spark内核
  Spark术语解释
  集群概览
  核心组件
  数据本地忄生
  常用RDD
  任务调度
  DAGScheduler
  TaskScheduler
  Task细节
  广播变量
  累加器
  忄生能调优

第三周SparkonYarn&Sparkasaservice
  SparkonYarn原理
  SparkonYarn实践
  JobServer架构
  JobServerAPI介绍
  JobServer配置与部署

第四周SparkStreaming原理与实践
  DStream
  数据源
  无状态transformation与有状态transformation
  checkpoint
  容错
  忄生能优化

第五周Shark与SparkSQL
  Shark数据模型
  Shark数据类型
  Shark架构
  Shark部署
  缓存(分区)表
  SharkServer
  Shark与Spark结合
  SparkSQL架构
  Parquet支持
  DSL
  SQLonRDD
  Hive支持
  UDF
  JDBCServer

第六周MachineLearningonSpark
  LinearRegression
  K-Means
  CollaborativeFiltering

第七周Spark多语言编程
  Python简介
  PySparkAPI
  使用Python编写Spark程序
  SparkwithJA危a

第八周图计算GraphX
  现存的图计算框架
  TableOperators
  GraphOperators
  GraphX设计

第九周Tachyon原理与实践
  Tachyon原理与架构
  Tachyon实践

第十周SparkR
  SparkR原理介绍
  安装配置与运行

游客，如果您要查看本帖隐藏内容请回复