曙海教學(xué)優(yōu)勢
本課程,秉承二十一年積累的教學(xué)品質(zhì),以項目實現(xiàn)為導(dǎo)向,面向企事業(yè)項目實際需要,老師將會與您分享設(shè)計的全流程以及工具的綜合使用經(jīng)驗、技巧。課程可定制,線上/線下/上門皆可,熱線:4008699035。
曙海培訓(xùn)的課程培養(yǎng)了大批受企業(yè)歡迎的工程師。大批企業(yè)和曙海
建立了良好的合作關(guān)系,合作企業(yè)30萬+。曙海培訓(xùn)的課程在業(yè)內(nèi)有著響亮的知名度。
?MapReduce2.0源碼分析與編程實戰(zhàn)培訓(xùn)課程
課程大綱:
第1章 大象也會跳舞
1.1 大數(shù)據(jù)時代
1.2 大數(shù)據(jù)分析時代
1.3 簡單、粗暴、有效這就是Hadoop
1.4 MapReduce與Hadoop
1.5 看,大象也會跳舞
第2章 大象的肚子HDFS文件系統(tǒng)詳解
2.1 HDFS基礎(chǔ)詳解
2.2 HDFS數(shù)據(jù)存取流程分析
2.3 HDFS命令行操作詳解
2.4 通過Web瀏覽HDFS文件
2.5 HDFS接口使用詳解
2.6 HDFS文件同步與并發(fā)訪問
第3章 “吃下去吐出來”Hadoop文件I/O系統(tǒng)詳解
3.1 Hadoop的壓縮類型介紹
3.2 Hadoop的壓縮類庫
3.3 I/O中序列化類型詳解
3.4 實現(xiàn)自定義的Writable類型
3.5 Hadoop中小文件處理詳解
第4章 “大象的大腦”MapReduce框架結(jié)構(gòu)與源碼分析
4.1 MapReduce框架結(jié)構(gòu)與源碼分析
4.2 編程實戰(zhàn):經(jīng)典的MapReduce單詞計數(shù)程序
第5章 深入!MapReduce配置與測試
5.1 MapReduce環(huán)境變量配置詳解
5.2 使用MRUnit對MapReduce進行測試
5.3 在本地磁盤上進行MapReduce測試
5.4 MapReduce計數(shù)器
第6章 大象的思考流程MapReduce運行流程詳解
6.1 經(jīng)典MapReduce任務(wù)的工作流程
6.2 經(jīng)典MapReduce任務(wù)異常處理詳解
6.3 經(jīng)典MapReduce任務(wù)的數(shù)據(jù)處理過程
6.4 MapReduce?2.0(YARN)工作流程詳解
第7章 更強的大象MapReduce高級程序設(shè)計續(xù)
7.1 MapReduce程序設(shè)計默認格式類型詳解
7.2 InputFormat輸入格式詳解
7.3 OutputFormat輸出格式詳解
7.4 多種輸入與輸出使用介紹
第8章 MapReduce相關(guān)特性詳解
8.1 MapReduce計數(shù)器
8.2 排序與查找
8.3 對輸出結(jié)果的值分組排序
8.4 編程實戰(zhàn):使用二次排序自動查找最小值
第9章 啤酒與尿布MapReduce連接與數(shù)據(jù)挖掘初步
9.1 對于同樣格式數(shù)據(jù)進行MapReduce連接
9.2 對于不同格式數(shù)據(jù)進行MapReduce連接
9.3 不能說的秘密啤酒與尿布
9.4 數(shù)據(jù)挖掘初步
第10章 MapReduce實戰(zhàn)編程及深度分析
10.1 編程實戰(zhàn):自定義數(shù)據(jù)庫中讀取數(shù)據(jù)
10.2 編程實戰(zhàn):串聯(lián)尋找共同轉(zhuǎn)載微博
10.3 編程實戰(zhàn):云存儲模型
10.4 編程實戰(zhàn):多文檔相似關(guān)鍵字檢索
10.5 編程實戰(zhàn):學(xué)生成績整理與分組