Hadoop深入淺出實戰(zhàn)經(jīng)典 24課
課程介紹:
本課程在兼顧Hadoop課程知識體系完善的前提下,把實際開發(fā)中應(yīng)用最多、最深、最實用的技術(shù)抽取出來,通過本課程,你將達(dá)到技術(shù)的新高點,進(jìn)入云計算的美好世界。在技術(shù)方面你將徹底掌握基本的Hadoop集群;Hadoop HDFS原理;Hadoop HDFS基本的命令;Namenode的工作機(jī)制;HDFS基本配置管理;MapReduce原理; HBase的系統(tǒng)架構(gòu);HBase的表結(jié)構(gòu);HBase如何使用MapReduce;MapReduce高級編程;split的實現(xiàn)詳解;Hive入門;Hive結(jié)合MapReduce;Hadoop的集群安裝等眾多知識點。
實戰(zhàn)應(yīng)用:
課程每階段都安排了實戰(zhàn)應(yīng)用項目,以此方便學(xué)生能更快的掌握知識點的應(yīng)用,如在第一階段,課程結(jié)合HDFS應(yīng)用,講解了圖片服務(wù)器的設(shè)計、以及如何利用Java API去對HDFS操作、在第二階段;課程結(jié)合HBase實現(xiàn)微博項目的各種功能,使學(xué)員可以活學(xué)活用。在第三階段:HBase和MapReduce結(jié)合時下了實現(xiàn)話單查詢與統(tǒng)計系統(tǒng),在第四階段,Hive實戰(zhàn)部分,通過實戰(zhàn)數(shù)據(jù)統(tǒng)計系統(tǒng),使學(xué)員在最短的時間內(nèi)掌握Hive的高級應(yīng)用。
課程目錄:
為什么會有第一代大數(shù)據(jù)技術(shù)Hadoop和第二代大數(shù)據(jù)技術(shù)Spark?
10分鐘從技術(shù)角度理解Hadoop
Hadoop集群安裝解析
Hadoop集群構(gòu)建硬件選擇、集群規(guī)模、網(wǎng)絡(luò)拓?fù)洹C(jī)架感知等
Hadoop集群之安裝Java、創(chuàng)建Hadoop用戶、配置SSH等實戰(zhàn)
Hadoop集群之安裝IP配置、Slaves、namenode和secondarynamenode的配置
Hadoop內(nèi)存需求量及Namenode內(nèi)存使用詳解
HDFS的配置以及安全高效的HDFS配置最佳實踐
Hadoop的MapReduce和Yarn的配置實戰(zhàn)詳解
Hadoop集群的格式化、集群運行實戰(zhàn)解析等
實戰(zhàn)WordCount測試Hadoop集群環(huán)境
Hadoop集群管理之Namenode目錄元數(shù)據(jù)結(jié)構(gòu)詳解
Hadoop集群管理之fsimage和edits工作機(jī)制內(nèi)幕詳解
Hadoop集群管理之SecondaryNamenode目錄元數(shù)據(jù)結(jié)構(gòu)詳解及其內(nèi)幕機(jī)制
Hadoop集群管理之Datanode目錄元數(shù)據(jù)結(jié)構(gòu)詳解
Hadoop集群管理之安全模式解析及動手實戰(zhàn)
Hadoop集群管理工具dfsadmin實戰(zhàn)詳解
Hadoop集群管理工具fsck實戰(zhàn)詳解
Hadoop集群管理工具DataBlockScanner 實戰(zhàn)詳解
Hadoop集群管理工具均衡器Balancer 實戰(zhàn)詳解
Hadoop集群監(jiān)控:日志、Metrics
Hadoop集群監(jiān)控Ganglia架構(gòu)設(shè)計和運行機(jī)制詳細(xì)解析
從技術(shù)角度思考Hadoop到底是什么.avi
從源碼角度分析Hadoop中 Eclipse中開發(fā)的代碼是如何提交給集群的?