零基礎(chǔ)到開發(fā)的spark教程
01 Spark介紹
001 本系列公開課程說明
002 What is Spark詳細(xì)講解(四大特性)
003 MapReduce與Spark異同點(diǎn)和優(yōu)勢比較
004 實(shí)時(shí)在線答疑交流
02 Spark 1.3 編譯
005 回顧上次課內(nèi)容和Spark 學(xué)習(xí)的基礎(chǔ)
006 Spark 1.x編譯的三種方式和如何使用Make方式編譯(注意事項(xiàng)詳解)
007 Spark運(yùn)行Local模式講解
008 課程實(shí)時(shí)在線答疑交流
03 Spark 環(huán)境搭建
009 Spark 1.x安裝前的準(zhǔn)備(安裝HDFS)
010 安裝部署Spark 1.x Standalone模式集群
011 運(yùn)行Spark Shell進(jìn)行測試以及對細(xì)節(jié)進(jìn)行說明
012 使用Spark 編寫大數(shù)據(jù)處理經(jīng)典案例WordCount程序
04 Spark RDD講解
013 深入講解使用Spark編程WordCount程序
014 Spark RDD詳解
015 實(shí)時(shí)在線答疑
05 如何使用IDEA開發(fā)程序
016 回顧總結(jié)前面內(nèi)容及如何學(xué)習(xí)Spark
017 Spark Cluster與Application中的重要概念以及如何提交應(yīng)用spark-submit
018 如何安裝IDEA、安裝Scala插件以及導(dǎo)入Spark 源碼
019 如何使用IDEA創(chuàng)建Scala Project、編寫Spark應(yīng)用及l(fā)ocal測試
020 如何使用IDEA對Spark Application進(jìn)行打包測試
06 RDD操作詳解
21 Spark RDD創(chuàng)建的兩種方式一
22 Spark RDD創(chuàng)建的兩種方式二
23 Spark RDD兩種類型的操作(Transformation和action)
24 Spark RDD操作之Transformation講解(結(jié)合源碼分析)
25 Spark RDD操作之Action講解(結(jié)合源碼分析)
26 Spark RDD緩存persistent講解(cache、結(jié)合源碼分析)
07 Spark JobHistory與Spark on YARN
27 Spark Application Monitor(應(yīng)用運(yùn)行時(shí)監(jiān)控)
28 Spark JobHistory(應(yīng)用完成以后監(jiān)控)
29 Hadoop YARN如何進(jìn)行資源管理和調(diào)度應(yīng)用
30 Spark Application如何運(yùn)行在YARN上
31 Spark應(yīng)用運(yùn)行時(shí)的部署模式client與cluster
32 Spark App運(yùn)行在YARN上
08 Spark內(nèi)核分析
33 Spark編程模型SparkContext詳解
34 通過源碼分析SparkConf的作用
35 Spark內(nèi)核分析之Spark Scheduler講解(結(jié)合WordCoun程序)
36 Spark內(nèi)核分析之通過代碼調(diào)試分析SparkContext啟動(dòng)過程一
37 Spark內(nèi)核分析之通過代碼調(diào)試分析SparkContext啟動(dòng)過程二
38 Spark內(nèi)核分析之跟蹤源碼分析Spark 如何提交應(yīng)用
包含三本電子書:
《企業(yè)級(jí)Hadoop 2.x項(xiàng)目實(shí)戰(zhàn)》V3
《企業(yè)級(jí)Hive實(shí)戰(zhàn)課程》大綱(第一版)
《企業(yè)級(jí)Spark 1.x從菜鳥到高手精品進(jìn)階課程》大綱V1