dmz社区

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 4438|回复: 54

[Spark/Scala] 2021 Spark核心原理与实战

  [复制链接]
  • TA的每日心情
    奋斗
    2023-5-21 15:25
  • 签到天数: 25 天

    [LV.4]偶尔看看III

    82

    主题

    110

    帖子

    562

    积分

    荣誉会员

    积分
    562

    发表于 2021-11-28 23:10:27 | 显示全部楼层 |阅读模式

    本站资源全部免费,回复即可查看下载地址!

    您需要 登录 才可以下载或查看,没有帐号?立即注册

    x
    01-课程介绍.mp4
    02-内容综述.mp4
    03-Spark简介及生态介绍.mp4
    04-Spark原理及特点:模块概述+特点.mp4
    05-Spark原理及特点:运行模式+集群组角色.mp4
    06-Spark原理及特点:Spark作业运行流程.mp4
    07-Spark的运行环境安装:Standalone入门实战.mp4
    08-Spark的运行环境安装:YARN入门实战.mp4
    09-Spark批处理做作业入门Demo.mp4
    10-Spark流处理做作业入门Demo.mp4
    11-SparkRDD原理:RDD抽象及相关概念.mp4
    12-SparkRDD原理:RDD依赖关系、Stage、RDD持久化、SparkPreferredLocation及CheckPoint原理和使用.mp4
    13-SparkRDD实战:如何利用外部数据集生成RDD?.mp4
    14-SparkRDD实战:Transformation和Action概念、LazyLoad及SparkFunction的3种实现方式.mp4
    15-SparkRDD实战:常用Transformation原理及实战.mp4
    16-SparkRDD实战:Action原理和实战、Spark广播变量原理和使用.mp4
    17-SparkSQL、DataFrame、DataSet原理和使用.mp4
    18-SparkSQLJoin操作及SparkSQLFunction.mp4
    19-SparkSQL原理和执行过程.mp4
    20-常用数据格式原理和使用:TEXT、CSV、JSON、PARQUET在Spark中的使用.mp4
    21-常用数据格式原理和使用:ORC、AVRO在Spark中的使用.mp4
    22-SparkConnecter:HDFS及HBase.mp4
    23-SparkConnecter:MongoDB.mp4
    24-SparkConnecter:Cassandra.mp4
    25-SparkConnecter:MySQL及Kafka.mp4
    26-SparkConnecter:ElasticSearch.mp4
    27-SparkStearming原理及实战:创建一个SparkStreaming应用.mp4
    28-SparkStearming原理及实战:DStream操作、数据持久化及性能优化.mp4
    29-SparkStructuredStearming原理及实战:StructuredStreaming概念、特点、数据模型和应用实战.mp4
    30-SparkStructuredStearming原理及实战:StructuredStearming事件时间、延迟数据处理策略、容错语义和编程模型.mp4
    31-SparkStructuredStearming原理及实战:StructuredStearming时间窗口操作、水位线和数据更新模式.mp4
    32-SparkStructuredStearming原理及实战:StreamJoin操作、重复数据处理、多Watermark处理策略、StructuredStearming结果输出.mp4
    33-Spark文件读写原理.mp4
    34-内存调优:JVM内存调优、堆外内存设置及storageFraction设置.mp4
    35-任务调优:Executor数量内存及CPU配置、设置合理的并行度、Task等待时长调优、Blacklisting调优.mp4
    36-失败重试与黑名单机制、推测式执行、资源申请机制.mp4
    37-SparkOnYARN:Client模式与Cluster模式.mp4
    38-SparkOnYARN:FIFOScheduler、CapacityScheduler原理和使用.mp4
    39-SparkOnYARN:YARNFairScheduler原理、使用及特点.mp4
    40-Spark文件读写原理.mp4
    41-内存调优:JVM内存调优、堆外内存设置及storageFraction设置.mp4
    42-任务调优:Executor数量内存及CPU配置、设置合理的并行度、Task等待时长调优、Blacklisting调优.mp4
    43-数据调优:数据本地性、复用RDD、BroadCast、Kryo序列化和CheckPoint.mp4
    44-算子调优.mp4
    45-SparkSQL调优和SparkStreaming调优.mp4
    46-Spark数据倾斜问题处理.mp4
    47-Spark机器学习概述:机器学习应用场景、分类和常用算法.mp4
    48-机器学习流程:数据收集与存储、数据清理与转换.mp4
    49-机器学习流程:模型训练、模型测试、模型部署与整合、模型监控与反馈及数据探索和可视化.mp4
    50-Spark常用统计方法:基础统计、相关性分析、数据抽样.mp4
    51-分类模型:概念与种类、线性回归及逻辑回归原理实现.mp4
    52-分类模型:朴素贝叶斯原理实现、决策树原理实现及协同过滤原理.mp4
    53-聚类模型:基于K-Means的聚类算法原理实现.mp4
    54-MLPipLine:如何通过SparkMLPipLine模式实现模型训练?.mp4
    55-Spark3.0新特性概述.mp4
    56-Spark未来趋势:为什么需要数据湖?.mp4
    57-Spark未来趋势:DeltaLake原理.mp4
    58-Spark未来趋势:DeltaLake实战.mp4
    59-Spark应用番外篇:大数据任务调度.mp4
    60-结束语.mp4
    geektime-Spark-master.rar


    下载地址:

    游客,如果您要查看本帖隐藏内容请回复
    温馨提示:
    1、本站所有内容均为互联网收集或网友分享或网络购买,本站不破解、不翻录任何视频!
    2、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意!
    3、本站资源仅供本站会员学习参考,不得传播及用于其他用途,学习完后请在24小时内自行删除.
    4、本站资源质量虽均经精心审查,但也难保万无一失,若发现资源有问题影响学习请一定及时点此进行问题反馈,我们会第一时间改正!
    5、若发现链接失效了请联系管理员,管理员会在2小时内修复
    6、如果有任何疑问,请加客服QQ:1300822626 2小时内回复你!
    回复

    使用道具 举报

  • TA的每日心情
    郁闷
    5 天前
  • 签到天数: 211 天

    [LV.7]常住居民III

    2

    主题

    611

    帖子

    3238

    积分

    傲视群雄

    Rank: 8Rank: 8

    积分
    3238

    发表于 2021-11-28 23:26:39 | 显示全部楼层
    确实是难得好帖啊,顶先
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2024-12-10 16:29
  • 签到天数: 35 天

    [LV.5]常住居民I

    0

    主题

    232

    帖子

    546

    积分

    技冠群雄

    Rank: 6Rank: 6

    积分
    546

    发表于 2021-11-29 08:30:39 | 显示全部楼层
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    擦汗
    11 小时前
  • 签到天数: 1126 天

    [LV.10]以坛为家III

    0

    主题

    1437

    帖子

    6004

    积分

    深不可测

    Rank: 9Rank: 9Rank: 9

    积分
    6004

    发表于 2021-11-29 09:00:06 | 显示全部楼层
    正需要,支持楼主大人了!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    2024-2-22 00:42
  • 签到天数: 260 天

    [LV.8]以坛为家I

    0

    主题

    711

    帖子

    2092

    积分

    终身会员[A]

    Rank: 7Rank: 7Rank: 7

    积分
    2092

    发表于 2021-11-29 09:43:14 | 显示全部楼层
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    3 小时前
  • 签到天数: 1234 天

    [LV.10]以坛为家III

    9

    主题

    1615

    帖子

    6585

    积分

    深不可测

    Rank: 9Rank: 9Rank: 9

    积分
    6585

    发表于 2021-11-29 09:46:39 | 显示全部楼层
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    奋斗
    2021-12-20 11:51
  • 签到天数: 30 天

    [LV.5]常住居民I

    0

    主题

    796

    帖子

    1659

    积分

    禁止访问

    积分
    1659
    发表于 2021-11-29 10:37:31 | 显示全部楼层
    提示: 作者被禁止或删除 内容自动屏蔽
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    2024-12-11 17:56
  • 签到天数: 283 天

    [LV.8]以坛为家I

    0

    主题

    351

    帖子

    1440

    积分

    一代宗师

    Rank: 7Rank: 7Rank: 7

    积分
    1440

    发表于 2021-11-29 10:58:00 | 显示全部楼层
    正需要,支持楼主大人了!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    11 分钟前
  • 签到天数: 625 天

    [LV.9]以坛为家II

    1

    主题

    2365

    帖子

    6910

    积分

    深不可测

    Rank: 9Rank: 9Rank: 9

    积分
    6910

    发表于 2021-11-29 12:31:49 | 显示全部楼层
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    19 小时前
  • 签到天数: 1181 天

    [LV.10]以坛为家III

    1

    主题

    2678

    帖子

    8579

    积分

    超凡入圣

    Rank: 10Rank: 10Rank: 10

    积分
    8579

    发表于 2021-11-29 20:06:38 | 显示全部楼层
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|Archiver|小黑屋|本站代理|dmz社区

    GMT+8, 2024-12-23 20:38 , Processed in 0.089538 second(s), 38 queries .

    Powered by Discuz! X3.4 Licensed

    Copyright © 2001-2021, Tencent Cloud.

    快速回复 返回顶部 返回列表