ITPub博客

首页 > 大数据 > 数据挖掘 > 如何快速入门Spark——千锋大数据教程免费领取

如何快速入门Spark——千锋大数据教程免费领取

原创 数据挖掘 作者:andy888168 时间:2019-12-19 16:29:01 0 删除 编辑

如何快速入门Spark ——千锋大数据教程免费领取

 

随着互联网的发展,大数据已经成为了新一代的“网红”,各行各业几乎都和大数据产生着关系。 Spark 是大数据中重要的框架之一,下面,千锋大数据培训老师就为大家分享如何快速入门 spark 。

 

 

 

Apache Spark 是在大数据工业界里用的最多的基于内存的技术框架,尤其是 RDD 的特性以及应用,对帮助理解 Spark 和任务提交的流程以及缓存机制。

 

通过以上教程可以让大家掌握Spark 的环境搭建,任务调度流程,以及 RDD 代码的应用。

 

课程目录:

第1 章 Spark 知识讲解

01_ 为什么学习 Spark

02_Spark 和 MapReduce 的对比 .mp4

03_Spark 框架体系

04_Spark 下载

05.Spark 运行模式介绍

06.Spark 集群安装

07.Spark 程序执行流程

08.Spark 相关名词解释

09_SparkShellLocal

10_SparkShellCluster

11_Spark2.2 和 Spark1.6Shell 对比

第2 章 Maven 和 IDEA

12_Maven 和 IDEA 下载

13_Maven 安装

14_IDEA 安装

15_IDEA 中配置 Maven

16_Scala 环境安装和 IDEA 中配置 Scala 插件

17_IDEA 创建 Spark 工程

18_Spark 开发 WordCount 程序

19_Spark 程序打包

20_Spark 集群运行打包程序

第3 章 RDD 知识讲解

21_RDD 概念

22_RDD 执行流程

23_RDD 属性

24_RDD 弹性

25_RDD 的两种创建

26_RDD 编程 API

第4 章 Transformation 算法

27_Transformation 算法

28_Action 算法

29_Map

30_filter

31_flatMap

32_sample

33 union

34 intersection

35 distinct

36 join

37_leftOuterJoin

38_rightOuterJoin

39_cartesian

40_groupBy

41_mapPartition

42_mapPartitionWithIndex

43_sortby

44_sortbykey

45_repartition

46_coalesce

47_partitionBy

48_repartitionAndSortWithinPartitions

49_reduce

50_reduceByKey

51_aggregateByKey

52_combineByKey

第5 章 Action 算法

53_collect

54_count

55_top

56_take

57_takeOrdered

58_first

59_saveAsTextFile

60_foreach

61_ 其他算子之 countByKey

62_ 其他算子之 countByValue

63_ 其他算子之 filterByRange

64_ 其他算子之 flatMapValues

65_ 其他算子之 foreachPartition

66_ 其他算子之 keyBy

67_ 其他算子之 keys 和 values

68_ 其他算子之 collectAsMap

69_RDD 函数传递

70_RDD 的依赖关系

71_RDD 任务划分

72_Lineage 血统

73_RDD 缓存 ( 持久化 )

 

 

 

 

 

私聊    领取配套视频 + 资料 + 源码

 

 


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69947096/viewspace-2669511/ ,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论
莫安迪分享各类资讯文章

注册时间:2019-09-02

  • 博文量
    69
  • 访问量
    43789