教程名稱：
xa0 xa0 xa0 xa0xa0年薪40萬（深入大數(shù)據(jù)架構(gòu)師之路）
教程內(nèi)容：
每個(gè)成熟的數(shù)據(jù)從業(yè)者都能夠靈活的運(yùn)用數(shù)據(jù)尋找獲取安裝Debug。數(shù)據(jù)庫也是另外一個(gè)比較重要的部分可以說是一個(gè)非常核心的技能了。是否具備code的能力是數(shù)據(jù)分析的一個(gè)分水嶺，senior的數(shù)據(jù)分析師會(huì)至少精通一種數(shù)據(jù)分析語言，并且如果想做數(shù)據(jù)挖掘，網(wǎng)絡(luò)爬蟲，交互可視化等等都是需要一定的代碼處理和理解能力的。這里主要說Python和R，兩者在數(shù)據(jù)分析領(lǐng)域可以說是各有千秋。隨著大數(shù)據(jù)時(shí)代的到來，大數(shù)據(jù)也成為國家戰(zhàn)略得到大力的推廣，大數(shù)據(jù)項(xiàng)目在各行各業(yè)遍地開花，大數(shù)據(jù)深入人心，從事一份大數(shù)據(jù)工作變得人人艷羨，成為數(shù)據(jù)科學(xué)家更成為眾多學(xué)生和職業(yè)者的夢(mèng)想。這不僅僅是因?yàn)閿?shù)據(jù)科學(xué)家的薪資比其他行業(yè)的薪資要高得多，更是因?yàn)閿?shù)據(jù)科學(xué)家是一份非常有趣有意義的工作，是一份不像程序員一樣吃青春飯的工作，其經(jīng)驗(yàn)的積累，像醫(yī)生一樣越老越吃香！把數(shù)據(jù)科學(xué)家稱作21世紀(jì)最性感的職業(yè)，一點(diǎn)不為過。
教程目錄：
1.課程體系介紹
2.Hadoop精講之map reduce原理及代碼演示
3.hadoop精講之hdfs詳解(1)
4.hadoop精講之hdfs(2)
5.hadoop產(chǎn)品選型
6.實(shí)戰(zhàn).基于hadoop streaming的wordcount
7.實(shí)戰(zhàn).topn的實(shí)現(xiàn)原理和實(shí)戰(zhàn)
8.實(shí)戰(zhàn).join的實(shí)現(xiàn)原理和實(shí)戰(zhàn)
9.實(shí)戰(zhàn).對(duì)join實(shí)現(xiàn)的改進(jìn)——優(yōu)化reducer
10.hive概述
11.hive必須要會(huì)的操作演示
12.分區(qū)表和動(dòng)態(tài)分區(qū)的使用
13.函數(shù)概述和udf演示
14.UDF實(shí)戰(zhàn)：實(shí)現(xiàn)udf
15.UDAF實(shí)戰(zhàn)：實(shí)現(xiàn)udaf
16.數(shù)據(jù)說明和重要操作演示
17.用戶內(nèi)容偏好實(shí)戰(zhàn)
18.什么是SCD以及技術(shù)難點(diǎn)
19.如何在hive中實(shí)現(xiàn)sequence功能
20.數(shù)據(jù)倉庫實(shí)戰(zhàn)：在hive中實(shí)現(xiàn) scd2的完整案例實(shí)戰(zhàn)
21.數(shù)據(jù)倉庫實(shí)戰(zhàn)：在hive中實(shí)現(xiàn)事實(shí)表
22.presto是什么.presto的架構(gòu)
23.presto運(yùn)行機(jī)制和配置文件詳解
24.presto on hive 實(shí)戰(zhàn).實(shí)現(xiàn)數(shù)據(jù)倉庫的Scd2和fact
25.kafka架構(gòu)深度剖析_1
26.kafka架構(gòu)深度剖析_2
27.架構(gòu)師裝逼必備–CAP理論以及在架構(gòu)設(shè)計(jì)中的應(yīng)用
28.kafka數(shù)據(jù)復(fù)制高可用的原理
29.kafka數(shù)據(jù)復(fù)制演示
30.選學(xué)–深入解釋leader和follower數(shù)據(jù)同步機(jī)制
31.kafka數(shù)據(jù)一致性參數(shù)詳解
32.數(shù)據(jù)一致性的實(shí)戰(zhàn)
33.配置zookeeper集群并驗(yàn)證
34.配置kafka集群并驗(yàn)證兩個(gè)集群正常工作
35.修改kafka在zookeeper上的配置目錄以及consumer的使用方式
36.kafka consumer 剖析
37.kafka consumer代碼實(shí)戰(zhàn)
38.kafka consumer balance 實(shí)戰(zhàn)
39.實(shí)現(xiàn)輪詢的producer
40.hbase概述和web界面
41.hbase架構(gòu)詳解.1
42.客戶端數(shù)據(jù)讀寫流程以及zookeeper的作用
43.hbase架構(gòu)詳解.2
44.hbase高可用能力
45.hbase data model詳解
46.數(shù)據(jù)操作實(shí)戰(zhàn).hbase工具功能
47.column family的進(jìn)階設(shè)置實(shí)戰(zhàn)
48.二級(jí)索引技術(shù)解密
49.電商應(yīng)用的二級(jí)索引設(shè)計(jì)實(shí)戰(zhàn)
50.項(xiàng)目背景概述
51.第一版設(shè)計(jì)及問題分析
52.第二版設(shè)計(jì)及問題分析
53.第三版設(shè)計(jì)及問題分析
54.最終設(shè)計(jì)方案ddi
55.hive on hbase概述
56.hive on hbase實(shí)戰(zhàn).把產(chǎn)品成本表加載到hbase
57.phoenix及對(duì)比hive on hbase
58.phoenix實(shí)戰(zhàn).1.通過view映射hbase中的用戶表并分析其特點(diǎn)
59.phoenix實(shí)戰(zhàn).2.通過table映射hbase中的用戶表并分析其特點(diǎn)
60.phoenix實(shí)戰(zhàn).3.通過table映射hbase中的用戶表并體會(huì)其特點(diǎn)
61.項(xiàng)目實(shí)戰(zhàn)
62.hbase事務(wù)機(jī)制概述
63.hbase事務(wù)之mvcc詳解以及和sql數(shù)據(jù)庫的對(duì)比
64.hbase物理存儲(chǔ)原理解析
65.和hbase存儲(chǔ)機(jī)制有關(guān)的一個(gè)大坑
66.禁用掉自動(dòng)split后如何維護(hù)
67.python_hbase開發(fā)實(shí)戰(zhàn)
68.python_phoenix開發(fā)實(shí)戰(zhàn)
69.項(xiàng)目實(shí)戰(zhàn).python_hbase_phoenix_用戶行為分析
70.kylin概述和工作原理
71.數(shù)據(jù)倉庫核心概念
72.cub的設(shè)計(jì)和構(gòu)建過程
73.實(shí)時(shí)cube的設(shè)計(jì)和構(gòu)建
74.案例實(shí)戰(zhàn)
75.和傳統(tǒng)bi工具的結(jié)合
76.運(yùn)維管理
77.elk技術(shù)棧介紹
78.安裝配置zookeeper
79.安裝配置kafka
80.驗(yàn)證kafka安裝成功
81.安裝配置filebeat
82.驗(yàn)證filebeat配置成功
83.配置logstash
84.安裝配置elasticsearch
85.安裝配置kibina
86.安裝ik索引做中文分詞
87.幾個(gè)輔助工具的安裝演示
88.通過restapi操作Elasticsearch的演示
89.elasticsearch基本概念(index,type,setting,mapping)
90.深入解析mapping.字段類型
91.深入解析analyzer
92.索引機(jī)制詳解
93.幾個(gè)高級(jí)參數(shù)介紹–all、source、store、doc_values
94.動(dòng)態(tài)映射
95.字段的動(dòng)態(tài)mapping
96.字段的動(dòng)態(tài)mapping之dynamic_template
97.index template詳解
98.索引模版和索引別名
99.最簡單的logstash演示
100.實(shí)戰(zhàn)2.多個(gè)輸出目標(biāo)
101.實(shí)戰(zhàn)3.解析日志內(nèi)容
102.實(shí)戰(zhàn)4.解析json格式日志
103.實(shí)戰(zhàn)5.如何把@timestamp修復(fù)成本地時(shí)間
104.實(shí)戰(zhàn)6.把logstash收集的數(shù)據(jù)保存到hdfs
105.實(shí)戰(zhàn)7.如何用access_time替代@timestamp
106.實(shí)戰(zhàn)8.利用插件獲取更多的信息
107.查詢語法總結(jié)
108.match搜索
109.range搜索
110.term搜索
111.terms進(jìn)階用法-關(guān)聯(lián)查詢
112.exists和not exists
113.bool查詢
114.filter查詢
115.聚合功能概述以及度量函數(shù)說明
116.聚合功能概述值度量函數(shù)的使用演示
117.聚合功能概述之分組聚合函數(shù)說明
118.聚合功能之分組函數(shù)實(shí)戰(zhàn)之terms實(shí)戰(zhàn)
119.聚合功能之分組函數(shù)實(shí)戰(zhàn)之histgram和range
120.聚合同能之分組函數(shù)實(shí)戰(zhàn)之data_histgram
121.聚合功能之分組函數(shù)實(shí)戰(zhàn)之filter and filters
122.terms分組統(tǒng)計(jì) vs query中的term terms
123.向桶中添加統(tǒng)計(jì)指標(biāo)
124.桶中桶和聯(lián)機(jī)OLAP
