5
（9653人評(píng)價(jià)）
筆記：(65387)
學(xué)員：(217537)
瀏覽：(277013)
曙海教學(xué)優(yōu)勢(shì)
本課程面向企事業(yè)項(xiàng)目實(shí)際需要,秉承二十一年積累的教學(xué)品質(zhì)，中國(guó)海關(guān)大數(shù)據(jù)培訓(xùn)，hadoop培訓(xùn)，spark培訓(xùn)-以項(xiàng)目實(shí)現(xiàn)為導(dǎo)向,老師將會(huì)與您分享設(shè)計(jì)的全流程以及工具的綜合使用經(jīng)驗(yàn)、技巧。線上/線下/上門皆可,中國(guó)海關(guān)大數(shù)據(jù)培訓(xùn)，hadoop培訓(xùn)，spark培訓(xùn)-專家,課程可定制,熱線:4008699035。
曙海的課程培養(yǎng)了大批受企業(yè)歡迎的工程師。曙海的課程在業(yè)內(nèi)有著響亮的知名度。大批企業(yè)和曙海
建立了良好的合作關(guān)系,合作企業(yè)30萬+。
大數(shù)據(jù)培訓(xùn)日程
?
課程目標(biāo)：
?
通過該課程的學(xué)習(xí)，會(huì)對(duì)大數(shù)據(jù)離線計(jì)算、實(shí)時(shí)計(jì)算的企業(yè)級(jí)構(gòu)架有清晰的理解以及對(duì)常用的成熟的大數(shù)據(jù)開源項(xiàng)目從原理到使用有深入的理解。
?
實(shí)時(shí)計(jì)算的項(xiàng)目常用組合為Flume(數(shù)據(jù)采集) + Kafka(高可用高并發(fā)分布式消息隊(duì)列) + spark streaming(流式計(jì)算) + hbase(分布式列式存儲(chǔ)數(shù)據(jù)庫(kù)，億級(jí)行百萬列毫秒級(jí)查詢)
?
離線計(jì)算項(xiàng)目常用組合為分布式文件存儲(chǔ)HDFS，資源調(diào)度器、分布式計(jì)算框架MapReduce、數(shù)據(jù)倉(cāng)庫(kù)Hive。
?
課程大綱：
?
|
時(shí)間 |
主題 |
內(nèi)容 |
|
|
第一天 |
上午 |
? ? ? ? 離線計(jì)算： Hadoop大數(shù)據(jù)生態(tài)圈、分布式存儲(chǔ)HDFS、資源管理 |
大數(shù)據(jù)生態(tài)圈介紹 開源相關(guān)項(xiàng)目說明以及每個(gè)項(xiàng)目的用途 實(shí)時(shí)計(jì)算整體構(gòu)架詳解 離線計(jì)算整體構(gòu)架詳解 分布式文件系統(tǒng)HDFS是什么 HDFS的體系結(jié)構(gòu) HDFS高可用集群原理詳解 HDFS如何使用 資源管理器介紹以及構(gòu)架 資源管理器核心組件詳解 資源調(diào)度器詳解? |
|
下午 |
? ? 離線計(jì)算： Hadoop MapReduce&Hive ? |
分布式計(jì)算MapReduce介紹 MapReduce整體流程 MapReduce實(shí)例 數(shù)據(jù)倉(cāng)庫(kù)工具Hive介紹 Hive模型介紹：數(shù)據(jù)庫(kù)、表、分區(qū)、高級(jí)函數(shù) Hive元數(shù)據(jù)介紹 |
|
|
第二天 |
上午 |
? ? 實(shí)時(shí)計(jì)算： 數(shù)據(jù)采集Flume、分布式消息隊(duì)列Kafka |
實(shí)時(shí)計(jì)算整體構(gòu)架設(shè)計(jì) Flume是什么以及體系結(jié)構(gòu)介紹 Flume組件介紹：agent、source、channel、sink Flume高可用拓?fù)浣榻B Kafka體系結(jié)構(gòu)詳解 Kafka核心概念 Kafka高可用高并發(fā)原理 Kafka生產(chǎn)者消費(fèi)者 Flume寫入kafka |
|
下午 |
? 實(shí)時(shí)計(jì)算： spark streaming流式計(jì)算、HBase分布式列存儲(chǔ) |
spark是什么以及體系結(jié)構(gòu) 彈性分布式數(shù)據(jù)集RDD spark streaming流式計(jì)算體系結(jié)構(gòu) spark steaming讀取kafka spark算子詳解 HBase存儲(chǔ)數(shù)據(jù)庫(kù)體系結(jié)構(gòu) Hbase的高可用 HBase數(shù)據(jù)模型詳解 HBase毫秒級(jí)查詢 |
|
?
?
以上課程可以根據(jù)客戶實(shí)際情況進(jìn)行靈活調(diào)整。
高級(jí)技術(shù)培訓(xùn)中心
電話：010- ??
網(wǎng)址：www.???www.
