Spark Streaming实时流处理项目实战,全套视频教程学习资料通过百度云网盘下载

admin

资源详情


第1章课程介绍课程介绍

第2章初识实时流处理本章节将从一个业务场景分析出发引出实时流处理的产生背景，对比离线处理和实时处理的区别，了解常用的实时流处理框架有哪些，实时流处理在企业级应用中各个环节的架构以及技术选型

第3章分布式日志收集框架Flume本章节将从通过一个业务场景出发引出Flume的产生背景，将讲解Flume的架构及核心组件，Flume环境部署以及FlumeAgent开发实战让大家学会如何使用Flume来进行日志的采集

第4章分布式发布订阅消息系统Kafka本章节将讲解Kafka的架构以及核心概念，Kafka环境的部署及脚本的使用，KafkaAPI编程，并通过Kafka容错忄生测试让大家体会到Kakfa的高可用忄生，并将Flume和Kafka整合起来开发一个功能

第5章实战环境搭建工欲善其事必先利其器，本章将讲解Hadoop、ZooKeeper、HBase、Spark的安装，以及如何使用IDEA整合MA危en/Spark/HBase/Hadoop来搭建我们的开发环境

第6章SparkStreaming入门本章节将讲解SparkStreaming是什么，了解SparkStreaming的应用场景及发展史，并从词频统计案例入手带大家了解SparkStreaming的工作原理

第7章SparkStreaming核心概念与编程本章节将讲解SparkStreaming中的核心概念、常用操作，通过SparkStreaming如何操作socket以及HDFS上的数据让大家进一步了解SparkStreaming的编程

第8章SparkStreaming进阶与案例实战本章节将讲解SparkStreaming如何处理带状态的数据，通过案例让大家知道SparkStreaming如何写数据到MySQL，SparkStreaming如何整合SparkSQL进行操作

第9章SparkStreaming整合Flume本章节将讲解SparkStreaming整合Flume的两种方式，讲解如何在本地进行开发测试，如何在服务器上进行测试

第10章SparkStreaming整合Kafka本章节将讲解SparkStreaming整合Kafka的两种方式，讲解如何在本地进行开发测试，如何在服务器上进行测试

第11章SparkStreaming整合Flume&Kafka打造通用流处理基础本章节将通过实战案例彻底打通SparkStreaming和Flume以及Kafka的综合使用，为后续项目实战打下坚实的基础

第12章SparkStreaming项目实战本章节将通过一个完整的项目实战让大家学会大数据实时流处理的各个环境的整合，如何根据业务需要来设计HBase的rowkey

第13章可视化实战本章节将通过两种方式来实现实时流处理结果的可视化操作，一是使用SpringBoot整合Echarts实现，二是使用更加炫酷的阿里云产品DataV来实现

第14章JA危a拓展本章节作为扩展内容，将带领大家使用JA危a来开始Spark应用程序，使得大家对于使用Scala以及JA危a来开发Spark应用程序都有很好的认识

游客，如果您要查看本帖隐藏内容请回复