班級規模及環境--熱線:4008699035 手機:15921673576( 微信同號) |
每期人數限3到5人。 |
上課時間和地點 |
上課地點:【上海】:同濟大學(滬西)/新城金郡商務樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院 【北京分部】:北京中山學院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領館區1號(中和大道) 【沈陽分部】:沈陽理工大學/六宅臻品 【鄭州分部】:鄭州大學/錦華大廈 【石家莊分部】:河北科技大學/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協同大廈
最近開課時間(周末班/連續班/晚班):2020年3月16日 |
實驗設備 |
☆資深工程師授課
☆注重質量
☆邊講邊練
☆合格學員免費推薦工作
★實驗設備請點擊這兒查看★ |
質量保障 |
1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
2、培訓結束后,授課老師留給學員聯系方式,保障培訓效果,免費提供課后技術支持。
3、培訓合格學員可享受免費推薦就業機會。 |
課程大綱 |
|
- 云計算分布式大數據Hadoop培訓
?
云計算分布式大數據Hadoop培訓——
HDFS&MapReduce&HBase&Hive&集群管理培訓
第一部分:
第1個主題:Hadoop思考
1.Hadoop的設計目標和適用場景
2.Hadoop架構解析
3.MapReduce工作原理和案例說明
第2個主題:?Hadoop安裝和配置實戰
1.?安裝和配置單機版Hadoop實戰
2.?安裝和配置偽分布式Hadoop實戰
3.安裝和配置分布式Hadoop集群實戰
第3個主題:HDFS
1.?HDFS命令行操作實戰
2.?HDFS的配置管理
3.?NameNode的工作機制
第4個主題:HDFS案例實戰
1.?HDFS案例的分析和設計
2.?環境搭建
3.使用Hadoop?Java?API實現對HDFS寫入、讀取、刪除文件等操作
第5個主題:MapReduce剖析
1.?MapReduce的原理和運行過程
2.?構建MapReduce的開發環境
第6個主題:MapReduce案例實戰
1.?使用MapReduce的Java接口實現經典的WordCount
2.?wordcount運行過程解析
3.?MapReduce實現數據去重操作
4.?MapReduce實現數據排序
5.?MapReduce實現數據平均數據的計算
第二部分:
第1個主題:HBase架構設計和實現剖析
1.?HBase架構設計
2.?HBase中的表結構等
3.?HBase:Master、Region、Region?Server
第2個主題:HBase案例實戰1---使用HBase實現微博系統
1.?項目架構和設計
2.?開發環境搭建
3.?實現用戶登錄和注銷
4.“關注”功能的設計和實現
5.“發微博”功能的設計和實現
6.發布和運行整個基于HBase的微博系統
第3個主題:HBase與MapReduce
1.?HBase與MapReduce的關系
2.?HBase如何使用MapReduce
第4個主題:HBase案例實戰2---話單查詢與統計
1.?項目架構設計
2.?開發環境搭建
3.?話單入庫和查詢的設計與實現
4.統計功能的設計與實現
第5個主題:MapReduce高級實戰
1.?Split實現剖析
2.?自定義輸入的實現
3.?Reduce的partition?
4.?案例實戰
第6個主題:安裝和使用Hive
1.?Hive剖析
2.?安裝Hive
3.Hive的基本使用
第7個主題:Hive與HDFS、MapReduce
1.?Hive向HDFS存入結構化數據
2.?使用MySQL作為Hive的元數據庫
3.Hive與MapReduce
第8個主題:Hive案例實戰---數據統計
1.?項目架構設計
2.?表結構設計
3.數據的插入與統計實現
第三部分:
第1個主題:Hadoop集群配置:機架感知,開啟壓縮和任務均衡
Hadoop?集群安裝和開啟LZO壓縮
Hadoop?配置集群具備機架感知
Hadoop?集群開啟公平任務調度器
Hadoop?集群開啟能力任務調度器
第2個主題:Hadoop?集群維護與管理
查看集群狀態
HDFS數據管理
Mapreduce?任務管理
HDFS安全模式
模擬集群Namenode,jobtrack失效
添加刪除節點
數據平衡
文件數據跨集群拷貝
集群升級
第3個主題:Hadoop?集群規劃和測試
1.?集群規劃(硬件,系統,網絡)
2.?集群性能測試
第4個主題:Hadoop?集群監控和運維
1.?使用Ganglia?監控Hadoop集群
2.?使用Cacti?監控操作系統
第5個主題:Hadoop?HDFS高可用
Hadoop?元數據NFS備份方案
Hadoop?SecondaryNameNode備份方案
Hadoop?CheckpointNode備份方案
Hadoop?BackupNode備份方案
Hadoop?Cloudera?HA?Namenode?方案
第6個主題:Hadoop開發者之路
1.?Hadoop技能模型
2.?Hadoop開發者最佳學習路線和方式
3.Hadoop開發者最佳成長路線
?
? ?
?
?
?
?
?
"
|