大数据教程:Spark基础及源码分析

大数据教程:Spark基础及源码分析 IT教程 第1张

/大数据教程:Spark基础及源码分析
├──01.Scala语言环境安装、Scala的基本语法
│ ├──1、认识scala-1.rar
│ ├──2、安装开发环境-1.rar
│ ├──3、scala Shell、用idea创建maven项目-1.mp4
│ ├──4、配置maven本地仓库、导入切换项目等其它配置-1.mp4
│ ├──5、变量的声明-1.mp4
│ ├──6、scala的7种值类型和条件表达式-1.mp4
│ ├──7、for循环-1.mp4
│ ├──8、方法和函数的声明以及方法转换成函数-1.mp4
│ ├──9、数组-1.mp4
│ ├──10、映射-1.mp4
│ ├──11、元组-1.mp4
│ ├──12、集合之seq-1.mp4
│ ├──13、集合之set-1.mp4
│ └──14、集合之map-1.mp4
├──02.常用方法练习
│ ├──1、lazy关键字-1.rar
│ ├──2、函数式编程练习之常用方法-1.mp4
│ ├──3、函数式编程之reduce-1.mp4
│ ├──4、函数式编程之fold-1.mp4
│ ├──5、函数式编程之aggregate-1.mp4
│ ├──6、函数式编程之交并差集-1.mp4
│ └──7、scala实现wordcount-1.mp4
├──03.面向对象、模式匹配
│ ├──01、创建类、属性-1.mp4
│ ├──02、构造器、辅助构造器-1.mp4
│ ├──03、单例对象-1.mp4
│ ├──04、伴生对象-1.mp4
│ ├──05、apply和unapply方法-1.mp4
│ ├──06、private关键字-1.mp4
│ ├──07、特质、抽象类、继承、重写、实现等-1.mp4
│ ├──08、模式匹配之匹配字符串-1.mp4
│ ├──09、模式匹配之匹配类型-1.mp4
│ ├──10、模式匹配之匹配数组、元组、集合-1.mp4
│ ├──11、模式匹配之样例类-1.mp4
│ └──12、模式匹配之偏函数-1.mp4
├──04.Actor、柯里化、隐式转换
│ ├──01、作为值的函数-1.mp4
│ ├──02、柯里化概念及声明方式-1.mp4
│ ├──03、柯里化练习-1.mp4
│ ├──04、隐式转换和隐式参数-1.mp4
│ ├──05、隐式转换练习1-1.mp4
│ ├──06、隐式转换练习2-1.mp4
│ ├──07、泛型-1.mp4
│ ├──08、upperbound-1.mp4
│ ├──09、viewbound-1.mp4
│ └──10、contextbound-1.mp4
├──05.泛型、Akka
│ ├──1、actor概念-1.rar
│ ├──2、actor实例之创建actor-1.rar
│ ├──3、actor实例之消息的接收与发送(异步没有返回值)-1.rar
│ ├──4、actor实例之消息的接收与发送(同步有返回值)-1.rar
│ ├──5、actor实例之消息的接收与发送(异步有返回值)-1.rar
│ ├──6、actor实例之并行编程思想实现单词计数-1.rar
│ ├──7、akka简介-1.rar
│ ├──8、akka案例需求分析-1.rar
│ └──9、akka案例代码分析-1.rar
├──06.Spark集群安装、Spark任务提交、Spark实现WordCount并上传任务
│ ├──1、spark简介-1.mp4
│ ├──2、spark集群搭建、启动-1.mp4
│ ├──3、spark Shell.启动和提交任务-1.mp4
│ ├──4、spark Wordcount-1.mp4
│ └──5、上传并执行任务-1.mp4
├──07.RDD的基本概念、常用算子练习
│ ├──1、rdd的概念-1.mp4
│ ├──2、生成rdd的两种方式-1.mp4
│ ├──3、两种类型的算子:transformation和action-1.mp4
│ ├──4、常用算子练习1-1.mp4
│ └──5、常用算子练习2-1.mp4
├──08.案例练习
│ ├──1、案例需求-求用户在某基站停留的时间-1.mp4
│ ├──2、案例实现-求用户在某基站停留的时间-1.mp4
│ ├──3、案例实现-求用户访问学科的子网页top3-1.mp4
│ └──4、案例实现-求用户访问学科的子网页top3-chache、自定义分区器-1.mp4
├──09.Spark集群启动流程和任务提交流程、案例练习
│ ├──1、spark集群启动流程-1.mp4
│ ├──2、spark任务提交流程-1.mp4
│ ├──3、wordcount中创建了那些rdd-1.mp4
│ └──4、案例分析实现-按照ip统计区域访问量-1.mp4
├──10.RDD的依赖关系、Stage划分、任务的生成、自定义排序
│ ├──1、rdd之间的依赖关系-1.mp4
│ ├──2、dag的生成和stage的划分-1.mp4
│ ├──3、webui观察stage划分和任务的生成-1.mp4
│ └──4、自定义二次排序-1.mp4
├──11.Day11 Checkpoint、SparkSQL、Hive-On-Spark
│ ├──1、checkpoint-1.mp4
│ ├──2、sparksql介绍-1.mp4
│ ├──3、创建dataframe-1.mp4
│ ├──4、dataframe常用操作-dsl风格语法-1.mp4
│ ├──5、dataframe常用操作-sql风格语法-1.mp4
│ ├──6、通过反射推断schema-1.mp4
│ ├──7、通过structtype直接指定schema-1.mp4
│ └──8、hive-on-spark-1.mp4
├──12.SparkStreaming、窗口操作、Spark-On-Yarn
│ ├──1、sparkstreaming简介-1.mp4
│ ├──2、实例分析:sparkstreaming获取netcat产生的数据进行实时分析-1.mp4
│ ├──3、sparkstreaming实现按批次累加-1.mp4
│ ├──4、窗口函数概念及使用场景-1.mp4
│ ├──5、窗口函数实现wordcount-1.mp4
│ ├──6、spark-on-yarn-1.mp4
│ └──7、补充:sparkstreaming依赖-1.mp4
└──13.源码分析:Spark启动流程、Stage划分、任务生成、任务提交流程
├──1、关于查看源码的一些介绍-1.mp4
├──2、导入源码-1.mp4
├──3、集群启动流程-master类-1.mp4
├──4、集群启动流程-worker类-1.mp4
├──5、sparksubmit提交任务-1.mp4
├──6、sparkcontext-1.mp4
├──7、创建driveractor和clientactor的过程-1.mp4
├──8、clientactor向master注册任务信息过程-1.mp4
├──9、任务调度的两种方式及master通知worker启动executor的过程-1.mp4
├──10、executor向driveractor反向注册的过程-1.mp4
├──11、rdd生成和stage划分-1.mp4
├──12、生成任务并提交-1.mp4
├──13、task任务执行流程-1.mp4
└──14、总结-任务生成及提交流程-1.mp4

大数据教程:Spark基础及源码分析 IT教程 第2张

相关下载

点击下载

参与评论