課程介紹：
整套課程從hadoop入門開(kāi)始，由淺入深，內(nèi)置“hadoop源碼解析與企業(yè)應(yīng)用開(kāi)發(fā)實(shí)戰(zhàn)”，“Hive開(kāi)發(fā)實(shí)戰(zhàn)”，“Hbase開(kāi)發(fā)實(shí)戰(zhàn)”，“Spark，mahout，sqoop，storm諸模塊開(kāi)發(fā)實(shí)戰(zhàn)”。因?yàn)檫@個(gè)課程有4個(gè)板塊組成，所以學(xué)員可以按照自己的實(shí)際情況選擇學(xué)習(xí)。例如，對(duì)于只需要了解hadoop基本編程的人，只需要選擇“hadoop源碼解析與企業(yè)應(yīng)用開(kāi)發(fā)實(shí)戰(zhàn)”模塊就可以了；對(duì)于立志于從事大數(shù)據(jù)領(lǐng)域的零起點(diǎn)人員，可以選擇四個(gè)板塊依次學(xué)習(xí)；對(duì)于已經(jīng)有一定基礎(chǔ)的hadoop開(kāi)發(fā)人員，你可以根據(jù)自己的情況，選擇學(xué)習(xí)模塊，而不必4個(gè)板塊從頭開(kāi)始學(xué)。
第一部分內(nèi)容：
I. Hadoop的起源與生態(tài)系統(tǒng)介紹。要點(diǎn)：
了解什么是大數(shù)據(jù)；
Google的三篇論文；
圍繞Hadoop形成的一系列的生態(tài)系統(tǒng)；
各個(gè)子項(xiàng)目簡(jiǎn)要介紹
II. Hadoop集群配置與搭建。要點(diǎn)：
Hadoop安裝與部署；
如何寫配置文件；
運(yùn)行簡(jiǎn)單的wordcount程序；
Hadoop程序結(jié)構(gòu)介紹 實(shí)戰(zhàn)：
Hadoop系統(tǒng)的安裝與部署；
編寫配置文件；
編寫運(yùn)行簡(jiǎn)單的wordcount程序。
預(yù)期收獲：
了解什么是大數(shù)據(jù)以及大數(shù)據(jù)和hadoop的關(guān)系；
了解hadoop本身；
學(xué)會(huì)Hadoop系統(tǒng)的安裝和部署；
學(xué)會(huì)配置hadoop系統(tǒng)；
學(xué)會(huì)編寫簡(jiǎn)單的wordcount程序；
第二部分內(nèi)容：
III. Common組件和HDFS組件原理及體系結(jié)構(gòu)介紹。要點(diǎn)：
Hadoop IO機(jī)制；
序列化；
壓縮；
RPC；
HDFS副本機(jī)制；
HDFS讀寫機(jī)制；
塊選擇策略；
預(yù)期收獲：
掌握common組件和HDFS組件；
了解Hadoop的IO機(jī)制；
第三部分內(nèi)容：
IV. MapReduce2.0組件原理及體系架構(gòu)介紹。要點(diǎn)：
MapReduce工作原理；
類型與格式；
JT內(nèi)部實(shí)現(xiàn)；
TT內(nèi)部實(shí)現(xiàn)；
Task運(yùn)行過(guò)程分析；
V. MapReduce2.0編程實(shí)戰(zhàn)。要點(diǎn)：
Pipes編程；
Streaming編程；
動(dòng)手編寫MapReduce程序；
實(shí)戰(zhàn)：
MapReduce2.0編程（Pipes，Streaming）；
編寫MapReduce程序；
預(yù)期收獲：
徹底掌握MapReduce這個(gè)關(guān)鍵模塊；
第四部分內(nèi)容：
VI. Hadoop集群管理與安全機(jī)制分析。要點(diǎn)：
Hadoop集群管理機(jī)制；
Hadoop現(xiàn)有安全機(jī)制
VII. YARN及ResourcManager組件。要點(diǎn)：
YARN/MRv2環(huán)境搭建與部署；
ResourceManager組件的分析與實(shí)戰(zhàn)；
實(shí)戰(zhàn)：
動(dòng)手搭建YARN環(huán)境
預(yù)期收獲：
掌握Hadoop的集群管理機(jī)制；
了解Hadoop現(xiàn)有的安全機(jī)制；
掌握YARN和ResourceManager組件。
——————-課程目錄——————-
課時(shí)1 免費(fèi)試聽(tīng).doc
課時(shí)2 免費(fèi)試聽(tīng)二.doc
課時(shí)3 付費(fèi)學(xué)員服務(wù)指引.doc
課時(shí)4 課前環(huán)境準(zhǔn)備.doc
課時(shí)5 參考資料.doc
課時(shí)6 Hadoop開(kāi)源軟件及其生態(tài)系統(tǒng).avi
課時(shí)7 HDFS集群的安裝與部署.avi
課時(shí)8 MapReduce集群的安裝與部署.avi
課時(shí)9 閱讀練習(xí)Hadoop 偽分布式集群部署參考文檔.pdf
課時(shí)9 閱讀練習(xí)ssh實(shí)現(xiàn)Linux無(wú)密碼訪問(wèn).pdf
課時(shí)10 第一周練習(xí).doc
課時(shí)11 Hadoop架構(gòu)答疑.avi
課時(shí)12 HDFS架構(gòu)、SNN、副本放置策略.avi
課時(shí)13 HDFS API.avi
課時(shí)14 練習(xí)2：HDFS組件分析1.doc
課時(shí)15 本周答疑.avi
課時(shí)16 準(zhǔn)備：JNI編程基礎(chǔ).avi
課時(shí)17 Hadoop IO.avi
課時(shí)18 HDFS 壓縮.avi
課時(shí)19 HDFS 完整性.avi
課時(shí)20 HDFS 序列化.avi
課時(shí)21 練習(xí)3 HDFS 詳細(xì)分析2.doc
課時(shí)22 HDFS 基于文件的數(shù)據(jù)結(jié)構(gòu).avi
課時(shí)23 Hadoop RPC 遠(yuǎn)程方法調(diào)用.avi
課時(shí)24 練習(xí)4.doc
課時(shí)25 MapReduce API 及工作流程(1).avi
課時(shí)25 MapReduce API 及工作流程（2）.avi
課時(shí)26 MapReduce工作原理（2）：錯(cuò)誤處理、作業(yè)調(diào)度、Shuffle和Sort.avi
課時(shí)27 MapReduce類型與格式(1).avi
課時(shí)27 MapReduce類型與格式(2).avi
課時(shí)28 練習(xí)5：MapReduce工作原理、流程.doc
課時(shí)29 MapReduce重要組件_ MapReduce Combiner組件分析.avi
課時(shí)30 MapReduce重要組件_ MapReduce Partitioner組件.avi
課時(shí)31 MapReduce重要組件_ MapReduce Recordreader組件(2).avi
課時(shí)32 練習(xí)6：MapReduce重要組件.doc
課時(shí)33 MapReduce計(jì)數(shù)器.avi
課時(shí)34 MapReduceJoin.avi
課時(shí)35 Map端Join.avi
課時(shí)36 MapReduce Sort.avi
課時(shí)37 Hadoop Pipes_Streaming高級(jí)編程.avi
課時(shí)38 練習(xí)7：MapReduce編程.doc
課時(shí)39 Hadoop 集群管理與安全.avi
課時(shí)40 Hbase.avi
課時(shí)41 練習(xí)8：HBase.doc
課時(shí)42 Yarn基礎(chǔ).avi
課時(shí)43 spark講解.avi
