[Spark/Scala] Spark从入门到精通(高级特性、案例实战、内核源码、性能调优)

课程目录:
001_Spark的前世今生.mp4
002_课程介绍.特色与价值.mp4
003_1.Scala编程详解基础语法.mp4
003_2.Scala编程详解基础语法.mp4
004_Scala编程详解条件控制与循环.mp4
005_Scala编程详解函数入门.mp4
006_Scala编程详解函数入门之默认参数和带名参数.mp4
007_Scala编程详解函数入门之变长参数.mp4
008_Scala编程详解函数入门之过程.lazy值和异常.mp4
009_1.Scala编程详解数组操作之Array、ArrayBuffer以及遍历数组_rec.mp4
009_2.Scala编程详解数组操作之Array、ArrayBuffer以及遍历数组_rec.mp4
010_Scala编程详解数组操作之数组转换_rec.mp4
011_Scala编程详解Map与Tuple_rec.mp4
012_Scala编程详解面向对象编程之类 .mp4
013_Scala编程详解面向对象编程之对象_rec.mp4
014_Scala编程详解面向对象编程之继承_rec.mp4
015_Scala编程详解面向对象编程之Trait_rec.mp4
016_Scala编程详解函数式编程_rec.mp4
017_Scala编程详解函数式编程之集合操作_rec.mp4
018_Scala编程详解模式匹配_rec.mp4
019_Scala编程详解类型参数_rec.mp4
020_Scala编程详解隐式转换与隐式参数_rec.mp4
021_Scala编程详解Actor入门_rec.mp4
022_课程环境搭建CentOS 6.5集群搭建_rec.mp4
023_课程环境搭建Hadoop 2.4.1集群搭建_rec.mp4
024_课程环境搭建Hive 0.13搭建 _rec.mp4
025_课程环境搭建ZooKeeper 3.4.5集群搭建_rec.mp4
026_课程环境搭建kafka_2.9.2-0.8.1集群搭建 _rec.mp4
027_课程环境搭建Spark 1.3.0集群搭建_rec(1).mp4
028_Spark核心编程Spark基本工作原理与RDD_rec.mp4
029_1.使用Java开发本地测试的wordcount程序_rec.mp4
029_2.将java开发的wordcount程序提交到spark集群上运行 _rec.mp4
029_3.使用scala开发wordcount程序_rec.mp4
029_4.使用spark-shell开发wordcount程序_rec.mp4
029_5.Spark UI补充说明_rec.mp4
029_6.spark-submit中的--master选项的补充说明(重要，必看!)_rec.mp4
030_Spark核心编程wordcount程序原理深度剖析_rec.mp4
031_Spark核心编程Spark架构原理_rec.mp4
032_Spark核心编程创建RDD(集合.本地文件、HDFS文件)_rec.mp4
033_1.transformation和action讲解与原理剖析_rec.mp4
033_2.案例统计每行出现的次数(操作key-value对) _rec.mp4
033_3.常用transformation和action操作概览 _rec.mp4
034_1.map案例实战将集合中的数字乘以2_rec.mp4
034_2.filter案例实战过滤集合中的偶数_rec.mp4
034_3.flatMap案例实战将文本行拆分为单词 _rec.mp4
034_4.groupByKey案例实战将每个班级的成绩进行分组_rec.mp4
034_5.reduceByKey案例实战统计每个班级的总分 _rec.mp4
034_6.sortByKey案例实战按照学生成绩进行排序 _rec.mp4
034_7.join和cogroup案例实战打印学生成绩_rec.mp4
035_Spark核心编程action操作开发实战_rec.mp4
036_Spark核心编程RDD持久化详解_rec.mp4
037_Spark核心编程共享变量(Broadcast Variable和Accumulator)_rec.mp4
038_Spark核心编程高级编程之基于排序机制的wordcount程序_rec.mp4
039_1.使用Java实现二次排序_rec.mp4
039_2.使用Scala实现二次排序_rec.mp4
040_1.获取文本内最大的前3个数字_rec.mp4
040_2.获取每个班级排名前3的成绩(分组取topn) _rec.mp4
041_Spark内核源码深度剖析Spark内核架构深度剖析_rec.mp4
042_Spark内核源码深度剖析宽依赖与窄依赖深度剖析_rec.mp4
043_1.Spark内核源码深度剖析基于Yarn的两种提交模式深度剖析_rec.mp4
043_2.基于yarn的提交模式的spark-env.sh配置补充 _rec.mp4
044_1.SparkContext原理剖析_rec.mp4
044_2.SparkContext源码分析_rec.mp4
045_Spark内核源码深度剖析Master主备切换机制原理剖析与源码分析 不加密.mp4
046_Spark内核源码深度剖析Master注册机制原理剖析与源码分析 _rec.mp4
047_Spark内核源码深度剖析Master状态改变处理机制原理剖析与源码分析 _rec.mp4
048_Spark内核源码深度剖析Master资源调度算法原理剖析与源码分析 _rec.mp4
049_Spark内核源码深度剖析Worker原理剖析与源码分析_rec.mp4
050_Spark内核源码深度剖析job触发流程原理剖析与源码分析_rec.mp4
051_1.stage划分算法原理剖析 _rec.mp4
051_2.DAGScheduler源码分析(stage划分算法、task最佳位置计算算法)_rec.mp4
052_Spark内核源码深度剖析TaskScheduler原理剖析与源码分析 _rec.mp4
053_Spark内核源码深度剖析Executor原理剖析与源码分析_rec.mp4
054_1.Task原理剖析 _rec.mp4
054_2.Task源码分析 _rec.mp4
055_1.普通Shuffle操作的原理剖析 在 _rec.mp4
055_2.优化后的Shuffle操作的原理剖析_rec.mp4
055_3.Shuffle读写源码分析_rec.mp4
056_BlockManager原理剖析(1) _rec.mp4
056_BlockManager源码分析(2)_rec.mp4
057_CacheManager原理剖析(1)_rec.mp4
057_CacheManager源码分析(2)_rec.mp4
058_Spark内核源码深度剖析Checkpoint原理剖析 _rec.mp4
059_Spark性能优化性能优化概览_rec.mp4
060_Spark性能优化诊断内存的消耗_rec.mp4
061_Spark性能优化高性能序列化类库_rec.mp4
062_Spark性能优化优化数据结构_rec.mp4
063_Spark性能优化对多次使用的RDD进行持久化或Checkpoint_rec.mp4
064_Spark性能优化使用序列化的持久化级别_rec.mp4
065_Spark性能优化Java虚拟机垃圾回收调优 _rec.mp4
066_Spark性能优化提高并行度_rec.mp4
067_Spark性能优化广播共享数据 _rec.mp4
068_Spark性能优化数据本地化_rec.mp4
069_Spark性能优化reduceByKey和groupByKey _rec.mp4
070_Spark性能优化shuffle性能优化_rec.mp4
071_1.Spark 1.3.0升级1.5.1的原因说明_rec.mp4
071_2.Spark 1.4.x和1.5.x版本的新特性 _rec.mp4
071_3.Spark 1.5.1源码编译_rec.mp4
071_4.Spark 1.5.1集群搭建 _rec.mp4
072_Spark SQL前世今生_rec.mp4
073_Spark SQLDataFrame的使用_rec.mp4
074_1.RDD转换为DataFrame的概览_rec.mp4
074_2.使用反射方式将RDD转换为DataFrame_rec.mp4
075_1.使用Java进行转换 _rec.mp4
075_2.使用Scala进行转换_rec.mp4
076_通用的load和save操作_rec.mp4
077_Spark SQLParquet数据源之使用编程方式加载数据_rec.mp4
078_Spark SQLParquet数据源之自动分区推断_rec.mp4
079_Spark SQLParquet数据源之合并元数据_rec.mp4
080_1.案例实战之查询分数大于80分的学生信息(Java) _rec.mp4
080_2.案例实战之查询分数大于80分的学生信息(Scala) _rec.mp4
081_Spark SQLHive数据源复杂综合案例实战 _rec.mp4
082_Spark SQLJDBC数据源复杂综合案例实战_rec.mp4
083_Spark SQL内置函数以及每日uv.销售额统计案例实战_rec.mp4
084_Spark SQL开窗函数以及top3销售额统计案例实战_rec.mp4
085_Spark SQLUDF自定义函数实战_rec.mp4
086_Spark SQLUDAF自定义聚合函数实战_rec.mp4
087_1.Spark SQL工作原理剖析以及性能优化 _rec.mp4
087_2.补充说明 _rec.mp4
087_3.Spark SQL延伸知识之Hive On Spark _rec.mp4
087_4.核心源码深度剖析(DataFrame lazy特性.Optimizer优化策略)_rec.mp4
087_5.每日top3热点搜索词统计案例实战 _rec.mp4
088_Spark Streaming大数据实时计算介绍 _rec.mp4
089_Spark Streaming基本工作原理_rec.mp4
090_Spark Streaming与Storm的对比分析_rec.mp4
091_1.Spark Streaming实时wordcount程序开发(Java)_rec.mp4
091_2.Spark Streaming实时wordcount程序开发(Scala) _rec.mp4
092_Spark StreamingStreamingContext详解 _rec.mp4
093_Spark Streaming输入DStream和Receiver详解_rec.mp4
094_Spark Streaming输入DStream之基础数据源以及基于HDFS的实时wordcount程序 _rec.mp4
095_输入DStream之Kafka数据源实战(基于Receiver的方式)_rec.mp4
096_输入DStream之Kafka数据源实战(基于Direct的方式）_rec.mp4
097_DStream的transformation操作概览_rec.mp4
098_updateStateByKey以及基于缓存的实时wordcount程序_rec.mp4
099_transform以及广告计费日志实时黑名单过滤案例实战_rec.mp4
100_window滑动窗口以及热点搜索词滑动统计案例实战_rec.mp4
101_DStream的output操作以及foreachRDD详解 _rec.mp4
102_与Spark SQL结合使用之top3热门商品实时统计案例实战 _rec.mp4
103_缓存与持久化机制 _rec.mp4
104_Checkpoint机制_rec.mp4
105_部署.升级和监控应用程序_rec.mp4
106_容错机制以及事务语义详解 _rec.mp4
107_架构原理深度剖析 _rec.mp4
108_StreamingContext初始化与Receiver启动原理剖析与源码分析_rec.mp4
109_1.数据接收原理剖析_rec.mp4
109_2.数据接收源码剖析_rec.mp4
110_数据处理原理剖析与源码分析(block与batch关系透彻解析)_rec.mp4
111_性能调优_rec.mp4
112_课程总结_rec.mp4
113_Scala编程进阶：Scaladoc的使用_rec.mp4
114_Scala编程进阶：跳出循环语句的3种方法_rec.mp4
115_Scala编程进阶：多维数组、Java数组与Scala数组的隐式转换_rec.mp4
116_Scala编程进阶：Tuple拉链操作、Java Map与Scala Map的隐式转换_rec.mp4
117_Scala编程进阶：扩大内部类作用域的2种方法、内部类获取外部类引用_rec.mp4
118_Scala编程进阶：package与import实战详解_rec.mp4
119_Scala编程进阶：重写field的提前定义、Scala继承层级、对象相等性_rec.mp4
120_Scala编程进阶：文件操作实战详解_rec.mp4
121_Scala编程进阶：偏函数实战详解_rec.mp4
122_Scala编程进阶：执行外部命令_rec.mp4
123_Scala编程进阶：正则表达式支持_rec.mp4
124_Scala编程进阶：提取器实战详解_rec.mp4
125_Scala编程进阶：样例类的提取器实战详解_rec.mp4
126_Scala编程进阶：只有一个参数的提取器 _rec.mp4
127_Scala编程进阶：注解实战详解_rec.mp4
128_Scala编程进阶：常用注解介绍_rec.mp4
129_Scala编程进阶：XML基础操作实战详解_rec.mp4
130_Scala编程进阶：XML中嵌入scala代码 _rec.mp4
131_Scala编程进阶：XML修改元素实战详解_rec.mp4
132_Scala编程进阶：XML加载和写入外部文档_rec.mp4
133_Scala编程进阶：集合元素操作_rec.mp4
134_Scala编程进阶：集合的常用操作方法_rec.mp4
135_Scala编程进阶：map、flatMap、collect、foreach实战详解 _rec.mp4
136_Scala编程进阶：reduce和fold实战详解1_rec.mp4
136_Scala编程进阶：reduce和fold实战详解2_rec.mp4
137_环境搭建-CentOS 6.4虚拟机安装_rec.mp4
138_环境搭建-Hadoop 2.5伪分布式集群搭建_rec.mp4
139_环境搭建-Spark 1.5伪分布式集群搭建_rec.mp4
140_第一次课程升级大纲介绍以及要点说明_rec.mp4
141_Spark核心编程进阶-Spark集群架构概览_rec.mp4
142_Spark核心编程进阶-Spark集群架构的几点特别说明_rec.mp4
143_Spark核心编程进阶-Spark的核心术语讲解 _rec.mp4
144_Spark核心编程进阶-Spark Standalone集群架构_rec.mp4
145_Spark核心编程进阶-单独启动master和worker脚本详解 _rec.mp4
146_Spark核心编程进阶-实验：单独启动master和worker进程 _rec.mp4
147_Spark核心编程进阶-worker节点配置以及spark-evn.sh参数详解 _rec.mp4
148_Spark核心编程进阶-实验：local模式提交spark作业 _rec.mp4
149_Spark核心编程进阶-实验：standalone client模式提交spark作业 _rec.mp4
150_Spark核心编程进阶-实验：standalone cluster模式提交spark作业_rec.mp4
151_Spark核心编程进阶-standalone模式下的多作业资源调度_rec.mp4
152_Spark核心编程进阶-standalone模式下的作业监控与日志记录_rec.mp4
153_Spark核心编程进阶-实验：运行中作业监控以及手工打印日志 _rec.mp4
154_Spark核心编程进阶-yarn-client模式原理讲解 _rec.mp4
155_Spark核心编程进阶-yarn-cluster模式原理讲解_rec.mp4
156_Spark核心编程进阶-实验：yarn-client模式提交spark作业_rec.mp4
157_Spark核心编程进阶-yarn模式下日志查看详解_rec.mp4
158_Spark核心编程进阶-yarn模式相关参数详解_rec.mp4
159_Spark核心编程进阶-spark工程打包以及spark-submit详解_rec.mp4
160_Spark核心编程进阶-spark-submit示例以及基础参数讲解 _rec.mp4
161_Spark核心编程进阶-实验：spark-submit最简单版本提交spark作业 _rec.mp4
162_Spark核心编程进阶-实验：spark-submit给main类传递参数_rec.mp4
163_Spark核心编程进阶-spark-submit多个示例以及常用参数详解_rec.mp4
164_Spark核心编程进阶-SparkConf、spark-submit以及spark-defaults.conf_rec.mp4
165_Spark核心编程进阶-spark-submit配置第三方依赖_rec.mp4
166_Spark核心编程进阶-spark算子的闭包原理详解_rec.mp4
167_Spark核心编程进阶-实验：对闭包变量进行累加操作的无效现象_rec.mp4
168_Spark核心编程进阶-实验：在算子内打印数据的无法看到现象_rec.mp4
169_Spark核心编程进阶-mapPartitions以及学生成绩查询案例 _rec.mp4
170_Spark核心编程进阶-mapPartitionsWithIndex以开学分班案例 _rec.mp4
171_Spark核心编程进阶-sample以及公司年会抽奖案例_rec.mp4
172_Spark核心编程进阶-union以及公司部门合并案例._rec.mp4
173_Spark核心编程进阶-intersection以及公司跨多项目人员查询案例_rec.mp4
174_Spark核心编程进阶-distinct以及网站uv统计案例_rec.mp4
175_Spark核心编程进阶-aggregateByKey以及单词计数案例_rec.mp4
176_Spark核心编程进阶-cartesian以及服装搭配案例 _rec.mp4
177_Spark核心编程进阶-coalesce以及公司部门整合案例_rec.mp4
178_Spark核心编程进阶-repartition以及公司新增部门案例_rec.mp4
179_Spark核心编程进阶-takeSampled以及公司年会抽奖案例_rec.mp4
180_Spark核心编程进阶-shuffle操作原理详解_rec.mp4
181_Spark核心编程进阶-shuffle操作过程中进行数据排序_rec.mp4
182_Spark核心编程进阶-会触发shuffle操作的算子 _rec.mp4
183_Spark核心编程进阶-shuffle操作对性能消耗的原理详解_rec.mp4
184_Spark核心编程进阶-shuffle操作所有相关参数详解以及性能调优.mp4
185_Spark核心编程进阶-综合案例1：移动端app访问流量日志分析_rec.mp4
186_Spark核心编程进阶-综合案例1：日志文件格式分析_rec.mp4
187_Spark核心编程进阶-综合案例1：读取日志文件并创建RDD _rec.mp4
188_Spark核心编程进阶-综合案例1：创建自定义的可序列化类_rec.mp4
189_Spark核心编程进阶-综合案例1：将RDD映射为key-value格式_rec.mp4
190_Spark核心编程进阶-综合案例1：基于deviceID进行聚合操作_rec.mp4
191_Spark核心编程进阶-综合案例1：自定义二次排序key类_rec.mp4
192_Spark核心编程进阶-综合案例1：将二次排序key映射为RDD的key_rec.mp4
193_Spark核心编程进阶-综合案例1：执行二次排序以及获取top10数据_rec.mp4
194_Spark核心编程进阶-综合案例1：程序运行测试以及代码调试_rec.mp4
195_Spark核心编程进阶-部署第二台CentOS机器_rec.mp4
196_Spark核心编程进阶-部署第二个Hadoop节点 _rec.mp4
197_Spark核心编程进阶-将第二个Hadoop节点动态加入集群_rec.mp4
198_Spark核心编程进阶-使用yarn-client和yarn-cluster提交spark作业 _rec.mp4
199_Spark内核原理进阶-union算子内部实现原理剖析 _rec.mp4
200_Spark内核原理进阶-groupByKey算子内部实现原理剖析_rec.mp4
201_Spark内核原理进阶-reduceByKey算子内部实现原理剖析_rec.mp4
202_Spark内核原理进阶-distinct算子内部实现原理剖析_rec.mp4
203_Spark内核原理进阶-cogroup算子内部实现原理剖析 _rec.mp4
204_Spark内核原理进阶-intersection算子内部实现原理剖析_rec.mp4
205_Spark内核原理进阶-join算子内部实现原理剖析_rec.mp4
206_Spark内核原理进阶-sortByKey算子内部实现原理剖析 _rec.mp4
207_Spark内核原理进阶-cartesian算子内部实现原理剖析_rec.mp4
208_Spark内核原理进阶-coalesce算子内部实现原理剖析 _rec.mp4
209_Spark内核原理进阶-repartition算子内部实现原理剖析_rec.mp4
210_Spark SQL实战开发进阶-Hive 0.13安装与测试_rec.mp4
211_Spark SQL实战开发进阶-Thrift JDBC、ODBC Server _rec.mp4
212_Spark SQL实战开发进阶-CLI命令行使用_rec.mp4
213_Spark SQL实战开发进阶-综合案例2：新闻网站关键指标离线统计 _rec.mp4
214_Spark SQL实战开发进阶-综合案例2：页面pv统计以及排序_rec.mp4
215_Spark SQL实战开发进阶-综合案例2：页面uv统计以及排序_rec.mp4
216_Spark SQL实战开发进阶-综合案例2：新用户注册比例统计_rec.mp4
217_Spark SQL实战开发进阶-综合案例2：用户跳出率统计_rec.mp4
218_Spark SQL实战开发进阶-综合案例2：版块热度排行榜统计_rec.mp4
219_Spark SQL实战开发进阶-综合案例2：测试与调试 _rec.mp4
220_Spark Streaming实战开发进阶-flume安装 _rec.mp4
221_Spark Streaming实战开发进阶-接收flume实时数据流_rec.mp4
222_Spark Streaming实战开发进阶-接收flume实时数据流 _rec.mp4
223_Spark Streaming实战开发进阶-高阶技术之自定义Receiver _rec.mp4
223_Spark Streaming实战开发进阶-高阶技术之自定义Receiver(结束)_rec.mp4
224_Spark Streaming实战开发进阶-kafka安装_rec.mp4
225_Spark Streaming实战开发进阶-综合案例3_rec.mp4
226_Spark Streaming实战开发进阶-综合案例3 _rec.mp4
227_Spark Streaming实战开发进阶-综合案例3_rec.mp4
228_Spark Streaming实战开发进阶-综合案例3：注册用户数实时统计 _rec.mp4
229_Spark Streaming实战开发进阶-综合案例3_rec.mp4
230_Spark Streaming实战开发进阶-综合案例3_rec.mp4
231_Spark运维管理进阶-基于ZooKeeper实现HA高可用性以及自动主备切换_rec.mp4
232_Spark运维管理进阶-实验：基于ZooKeeper实现HA高可用性以及自动主备切换 _rec.mp4
233_Spark运维管理进阶-基于文件系统实现HA高可用性以及手动主备切换 _rec.mp4
234_Spark运维管理进阶-实验：基于文件系统实现HA高可用性以及手动主备切换_rec.mp4
235_Spark运维管理进阶-作业监控-Spark Web UI以及监控实验_rec.mp4
236_Spark运维管理进阶-作业监控_rec.mp4
237_Spark运维管理进阶-作业监控_rec.mp4
238_Spark运维管理进阶-作业监控_rec.mp4
239_Spark运维管理进阶-作业监控 未加密.mp4
240_Spark运维管理进阶-作业资源调度_rec.mp4
241_Spark运维管理进阶-作业资源调度 _rec.mp4
242_Spark运维管理进阶-作业资源调度_rec.mp4
243_Spark运维管理进阶-作业资源调度_rec.mp4
244_Spark运维管理进阶-作业资源调度 _rec.mp4
245_Spark运维管理进阶-作业资源调度 _rec.mp4
246_新特性介绍_rec.mp4
247_新特性介绍-易用性：标准化SQL支持以及更合理的API_rec.mp4
248_新特性介绍-高性能：让Spark作为编译器来运行_rec.mp4
249_新特性介绍-智能化：Structured Streaming介绍_rec.mp4
250_新特性介绍-Spark 1.x的Volcano Iterator Model技术缺陷分析 _rec.mp4
251_新特性介绍-whole-stage code generation技术和vectorization技术_rec.mp4
252_Spark 2.x与1.x对比以及分析、学习建议以及使用建议_rec.mp4
253_课程环境搭建：虚拟机、CentOS、Hadoop、Spark等_rec.mp4
254_开发环境搭建：Eclipse+Maven+Scala+Spark_rec.mp4
255_SparkSession、Dataframe、Dataset开发入门(1)_rec.mp4
255_SparkSession、Dataframe、Dataset开发入门(2)_rec.mp4
256_Dataset开发详解-初步体验untypd操作案例：计算部门平均年龄与薪资 _rec.mp4
257_Dataset开发详解-action操作：collect、count、foreach、reduce等_rec.mp4
258_Dataset开发详解-基础操作：持久化、临时视图、ds与df互转换、写数据等_rec.mp4
259_Dataset开发详解-typed操作：coalesce、repartition 不加密.mp4
260_Dataset开发详解-typed操作：distinct、dropDuplicates_rec.mp4
261_Dataset开发详解-typed操作：except、filter、intersect_rec.mp4
262_Dataset开发详解-typed操作：map、flatMap、mapPartitions_rec.mp4
263_Dataset开发详解-typed操作：joinWith _rec.mp4
264_Dataset开发详解-typed操作：sort_rec.mp4
265_Dataset开发详解-typed操作：randomSplit、sample_rec.mp4
266_Dataset开发详解-untyped操作：select、where、groupBy、agg、col、join _rec.mp4
267_Dataset开发详解-聚合函数：avg、sum、max、min、count、countDistinct _rec.mp4
268_Dataset开发详解-聚合函数：collect_list、collect_set_rec.mp4
269_Dataset开发详解-其他常用函数_rec.mp4
270_Structured Streaming：深入浅出的介绍_rec.mp4
271_Structured Streaming：wordcount入门案例_rec.mp4
272_Structured Streaming：编程模型_rec.mp4
273_Structured Streaming：创建流式的dataset和dataframe_rec.mp4
274_Structured Streaming：对流式的dataset和dataframe执行计算操作_rec.mp4
275_Structured Streaming：output mode、sink以及foreach sink详解_rec.mp4
276_Structured Streaming：管理streaming query_rec.mp4
277_Structured Streaming：基于checkpoint的容错机制_rec.mp4
278_Spark面试、简历中的项目编写以及实际生产环境的集群和资源配置等_rec
000.第一次升级软件包+课程代码[113-245].zip
000.第二次升级软件包+课程代码[246-278].rar
000.课程代码+软件包.rar


下载地址: