班級規模及環境--熱線:4008699035 手機:15921673576( 微信同號) |
每期人數限3到5人。 |
上課時間和地點 |
上課地點:【上海】:同濟大學(滬西)/新城金郡商務樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院 【北京分部】:北京中山學院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領館區1號(中和大道) 【沈陽分部】:沈陽理工大學/六宅臻品 【鄭州分部】:鄭州大學/錦華大廈 【石家莊分部】:河北科技大學/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協同大廈
最近開課時間(周末班/連續班/晚班):2020年3月16日 |
實驗設備 |
☆資深工程師授課
☆注重質量
☆邊講邊練
☆合格學員免費推薦工作
★實驗設備請點擊這兒查看★ |
質量保障 |
1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
2、培訓結束后,授課老師留給學員聯系方式,保障培訓效果,免費提供課后技術支持。
3、培訓合格學員可享受免費推薦就業機會。 |
課程大綱 |
|
- Hadoop管理及開發培訓
?
Hadoop管理及開發培訓
課程目標:
1、?深入理解Hadoop實現原理和架構
2、?Hadoop系統安裝、配置、運維
3、?大型Hadoop項目的開發、運行、調試、優化
4、?HBase、Hive、Pig、Oozie、ZooKeeper等相關項目使用和開發
課程大綱:
1、?Hadoop簡介
a)?什么是大數據
b)?傳統的并行計算和分布式計算
c)?Hadoop的誕生
d)?Hadoop的特點
2、?HDFS分布式文件系統管理
a)?HDFS設計目標
b)?HDFS工作原理
c)?HDFS命令行工具介紹
d)?HDFS系統及硬件推薦配置
e)?HDFS安裝
f)?HDFS參數設置推薦
g)?HDFS配置參數具體介紹
3、?HDFS分布式文件系統開發
a)?Eclipse?開發環境
b)?Java?API?詳解
c)?練習
4、?Map/Reduce分布式運算框架管理
a)?為什么需要M/R
b)?M/R的工作機制
c)?M/R相關的系統服務
d)?M/R參數配置
e)?M/R啟動、停止、查看日志
f)?M/R任務調度策略
5、?Map/Reduce分布式運算框架開發
a)?M/R程序的框架及接口詳解
b)?M/R的輸入輸出
c)?運行M/R程序
d)?練習
6、?HBase分布式數據庫管理及開發
a)?NoSQL介紹
b)?什么是HBase、為什么使用HBase
c)?HBase與關系型數據庫的對比
d)?HBase架構、服務、存儲結構
e)?表、列簇、分區
f)?HBase安裝、配置、啟動、日志
g)?HBase的Java?API:CRUD、M/R、Filter
h)?練習
i)?HBase高級特性:Coprocessor、性能優化
j)?練習
k)?Schema設計要點
7、?Hive數據倉庫使用與開發
a)?Hive的使用場景
b)?Hive的安裝與配置
c)?Hive?QL詳解
d)?UDF與UDAF的編寫
e)?練習
8、?Pig腳本的使用與開發
a)?Pig的使用場景
b)?Pig的安裝與配置
c)?Pig?Latin語言詳解
d)?用戶函數以及運行模式
9、?Oozie工作流引擎
a)?Oozie的使用場景
b)?工作流的定義
c)?流程XML原語
d)?練習
10、?Hadoop系統監控與運維:Ganglia集成
11、?Storm流計算框架簡介
12、?ZooKeeper分布式調度系統的原理、架構、特性、配置、API
13、?Sqoop數據庫集成框架簡介
14、?Flume數據流采集系統簡介
15、?Mahout、Redis、Lucene/Solr簡介
?
?
?
?
?
?
?
?
?
? ?
?
?
?
?
?
"
|