班級規模及環境--熱線:4008699035 手機:15921673576( 微信同號) |
每期人數限3到5人。 |
上課時間和地點 |
上課地點:【上海】:同濟大學(滬西)/新城金郡商務樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院 【北京分部】:北京中山學院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領館區1號(中和大道) 【沈陽分部】:沈陽理工大學/六宅臻品 【鄭州分部】:鄭州大學/錦華大廈 【石家莊分部】:河北科技大學/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協同大廈
最近開課時間(周末班/連續班/晚班):2020年3月16日 |
實驗設備 |
◆課時: 共5 部份,30學時
☆注重質量
☆邊講邊練
☆合格學員免費推薦工作
★實驗設備請點擊這兒查看★ |
質量保障 |
1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
2、培訓結束后,授課老師留給學員聯系方式,保障培訓效果,免費提供課后技術支持。
3、培訓合格學員可享受免費推薦就業機會。 |
大綱 |
|
一、初識hadoop
聽過大數據,必聽過hadoop,此部分帶領大家了解hadoop的用途,在大數據中的用途,以及快速搭建一個hadoop的實驗環境,在本過程中不僅將用到前面的Linux知識,而且會對hadoop的架構有深入的理解,并為你以后架構大數據項目打下堅實基礎。
1) Hadoop生態環境介紹2) Hadoop云計算中的位置和關系3) 國內外Hadoop應用案例介紹4) Hadoop 概念、版本、歷史5) Hadoop 核心組成介紹及hdfs、mapreduce 體系結構6) Hadoop 的集群結構7) Hadoop 偽分布的詳細安裝步驟8) 通過命令行和瀏覽器觀察hadoop
二、 HDFS體系結構和shell以及java操作
詳細剖析HDFS,從知曉原理到開發網盤的項目讓大家打好學習大數據的基礎,大數據之于分布式,分布式學習從學習分布式文件系統(HDFS)開始。
1) HDFS底層工作原理2) HDFS datanode,namenode詳解3) Hdfs shell4) Hdfs java api
三、 詳細講解Mapreduce
Mapreduce可以說是任何一家大數據公司都會用到的計算框架,也是每個大數據工程師應該熟練掌握的,此處的學習除了老師詳細的講解理論外,會通過大量的案例讓大家徹底掌握。
1) Mapreduce四個階段介紹2) Writable3) InputSplit和OutputSplit4) Maptask5) Shuffle:Sort,Partitioner,Group,Combiner6) Reducer
四、 Mapreduce案例案例
1) 二次排序2) 倒排序索引3) 最優路徑
4) 電信數據挖掘之-----移動軌跡預測分析
5) 社交好友推薦算法6) 互聯網精準廣告推送 算法
五、 Hadoop2.x集群搭建
前面帶領大家開發了大量的MapReduce程序,此部分將帶來大家讓開發的程序運行在分布式集群中,并且運行在健壯高可用的集群中。
1) Hadoop2.x集群結構體系介紹2) Hadoop2.x集群搭建3) NameNode的高可用性(HA)4) HDFS Federation5) ResourceManager 的高可用性(HA)6) Hadoop集群常見問題和解決方法
|