如何快速入門Spark——千鋒大資料教程免費領取

如何快速入門Spark ——千鋒大資料教程免費領取

 

隨著網際網路的發展，大資料已經成為了新一代的“網紅”，各行各業幾乎都和大資料產生著關係。 Spark 是大資料中重要的框架之一，下面，千鋒大資料培訓老師就為大家分享如何快速入門 spark 。

 

 

 

Apache Spark 是在大資料工業界裡用的最多的基於記憶體的技術框架，尤其是 RDD 的特性以及應用，對幫助理解 Spark 和任務提交的流程以及快取機制。

 

透過以上教程可以讓大家掌握Spark 的環境搭建，任務排程流程，以及 RDD 程式碼的應用。

 

課程目錄：

第1 章 Spark 知識講解

01_ 為什麼學習 Spark

02_Spark 和 MapReduce 的對比 .mp4

03_Spark 框架體系

04_Spark 下載

05.Spark 執行模式介紹

06.Spark 叢集安裝

07.Spark 程式執行流程

08.Spark 相關名詞解釋

09_SparkShellLocal

10_SparkShellCluster

11_Spark2.2 和 Spark1.6Shell 對比

第2 章 Maven 和 IDEA

12_Maven 和 IDEA 下載

13_Maven 安裝

14_IDEA 安裝

15_IDEA 中配置 Maven

16_Scala 環境安裝和 IDEA 中配置 Scala 外掛

17_IDEA 建立 Spark 工程

18_Spark 開發 WordCount 程式

19_Spark 程式打包

20_Spark 叢集執行打包程式

第3 章 RDD 知識講解

21_RDD 概念

22_RDD 執行流程

23_RDD 屬性

24_RDD 彈性

25_RDD 的兩種建立

26_RDD 程式設計 API

第4 章 Transformation 演算法

27_Transformation 演算法

28_Action 演算法

29_Map

30_filter

31_flatMap

32_sample

33 union

34 intersection

35 distinct

36 join

37_leftOuterJoin

38_rightOuterJoin

39_cartesian

40_groupBy

41_mapPartition

42_mapPartitionWithIndex

43_sortby

44_sortbykey

45_repartition

46_coalesce

47_partitionBy

48_repartitionAndSortWithinPartitions

49_reduce

50_reduceByKey

51_aggregateByKey

52_combineByKey

第5 章 Action 演算法

53_collect

54_count

55_top

56_take

57_takeOrdered

58_first

59_saveAsTextFile

60_foreach

61_ 其他運算元之 countByKey

62_ 其他運算元之 countByValue

63_ 其他運算元之 filterByRange

64_ 其他運算元之 flatMapValues

65_ 其他運算元之 foreachPartition

66_ 其他運算元之 keyBy

67_ 其他運算元之 keys 和 values

68_ 其他運算元之 collectAsMap

69_RDD 函式傳遞

70_RDD 的依賴關係

71_RDD 任務劃分

72_Lineage 血統

73_RDD 快取 ( 持久化 )

 

 

 

 

 

私聊    領取配套影片 + 資料 + 原始碼