Hadoop深入淺出實戰(zhàn)經(jīng)典 24課
課程介紹:
本課程在兼顧Hadoop課程知識體系完善的前提下,把實際開發(fā)中應用最多、最深、最實用的技術抽取出來,通過本課程,你將達到技術的新高點,進入云計算的美好世界。在技術方面你將徹底掌握基本的Hadoop集群;Hadoop HDFS原理;Hadoop HDFS基本的命令;Namenode的工作機制;HDFS基本配置管理;MapReduce原理; HBase的系統(tǒng)架構;HBase的表結構;HBase如何使用MapReduce;MapReduce高級編程;split的實現(xiàn)詳解;Hive入門;Hive結合MapReduce;Hadoop的集群安裝等眾多知識點。
實戰(zhàn)應用:
課程每階段都安排了實戰(zhàn)應用項目,以此方便學生能更快的掌握知識點的應用,如在第一階段,課程結合HDFS應用,講解了圖片服務器的設計、以及如何利用Java API去對HDFS操作、在第二階段;課程結合HBase實現(xiàn)微博項目的各種功能,使學員可以活學活用。在第三階段:HBase和MapReduce結合時下了實現(xiàn)話單查詢與統(tǒng)計系統(tǒng),在第四階段,Hive實戰(zhàn)部分,通過實戰(zhàn)數(shù)據(jù)統(tǒng)計系統(tǒng),使學員在最短的時間內(nèi)掌握Hive的高級應用。
課程目錄:
為什么會有第一代大數(shù)據(jù)技術Hadoop和第二代大數(shù)據(jù)技術Spark?
10分鐘從技術角度理解Hadoop
Hadoop集群安裝解析
Hadoop集群構建硬件選擇、集群規(guī)模、網(wǎng)絡拓撲、機架感知等
Hadoop集群之安裝Java、創(chuàng)建Hadoop用戶、配置SSH等實戰(zhàn)
Hadoop集群之安裝IP配置、Slaves、namenode和secondarynamenode的配置
Hadoop內(nèi)存需求量及Namenode內(nèi)存使用詳解
HDFS的配置以及安全高效的HDFS配置最佳實踐
Hadoop的MapReduce和Yarn的配置實戰(zhàn)詳解
Hadoop集群的格式化、集群運行實戰(zhàn)解析等
實戰(zhàn)WordCount測試Hadoop集群環(huán)境
Hadoop集群管理之Namenode目錄元數(shù)據(jù)結構詳解
Hadoop集群管理之fsimage和edits工作機制內(nèi)幕詳解
Hadoop集群管理之SecondaryNamenode目錄元數(shù)據(jù)結構詳解及其內(nèi)幕機制
Hadoop集群管理之Datanode目錄元數(shù)據(jù)結構詳解
Hadoop集群管理之安全模式解析及動手實戰(zhàn)
Hadoop集群管理工具dfsadmin實戰(zhàn)詳解
Hadoop集群管理工具fsck實戰(zhàn)詳解
Hadoop集群管理工具DataBlockScanner 實戰(zhàn)詳解
Hadoop集群管理工具均衡器Balancer 實戰(zhàn)詳解
Hadoop集群監(jiān)控:日志、Metrics
Hadoop集群監(jiān)控Ganglia架構設計和運行機制詳細解析
從技術角度思考Hadoop到底是什么.avi
從源碼角度分析Hadoop中 Eclipse中開發(fā)的代碼是如何提交給集群的?