◆時： 共5部份,30學時
        
        ☆注重質(zhì)量 ☆邊講邊練32

+84322
        ☆合格學員免費推薦工作
        ★實驗設(shè)備請點擊這兒查看★

        1、培訓過程中，如有部分內(nèi)容理解不透或消化不好，可免費在以后培訓班中重聽；
        2、培訓結(jié)束后,授課老師留給學員聯(lián)系方式,保障培訓效果,免費提供課后技術(shù)支持。
        3、培訓合格學員可享受免費推薦就業(yè)機會。

一、Linux基礎(chǔ)
?? ? 1、Linux的實驗環(huán)境和安裝配置
? ? 2、使用VI編輯器
?? ? 3、Linux的目錄結(jié)構(gòu)
?? ? 4、文件目錄操作和壓縮命令
? ? 5、Linux的權(quán)限管理?
?? ? 6、安裝JDK常用軟件
?? ? 7、案例分析：Java的死鎖

二、Hadoop的背景知識與起源

??? 8、實驗環(huán)境簡介
? ? 9、本門課程各章概述
? 10、大數(shù)據(jù)的起源和基本概念

? 11、Google的基本思想之一：GFS

? 12、Google的基本思想之二：MapReduce

? 13、Google的基本思想之三：BigTable

三、搭建Hadoop環(huán)境

? 14、Hadoop的目錄結(jié)構(gòu)和本地模式的搭建

? 15、搭建Hadoop的偽分布模式

? 16、免密碼登錄的原理和配置

? 17、搭建Hadoop的全分布模式

四、Apache Hadoop的體系結(jié)構(gòu)

? 18、HDFS體系結(jié)構(gòu)之一：NameNode

? 19、HDFS體系結(jié)構(gòu)之一：DataNode

? 20、HDFS體系結(jié)構(gòu)之三：Secondary NameNode

? 21、Yarn的體系結(jié)構(gòu)和資源分配方式

? 22、HBase的體系結(jié)構(gòu)

? 23、主從結(jié)構(gòu)的單點故障問題

五、HDFS

? 24、HDFS的操作方式之一：Web Console
? 25、HDFS的操作方式之二：命令行
? 26、HDFS的操作方式之三：使用Java創(chuàng)建目錄和HDFS的權(quán)限
? 27、使用JavaAPI上傳數(shù)據(jù)
? 28、使用JavaAPI下載數(shù)據(jù)
? 29、使用JavaAPI查看數(shù)據(jù)文件的元信息
? 30、HDFS上傳文件的原理和過程
? 31、HDFS下載文件的原理和過程
? 32、什么是Java的動態(tài)代理
? 33、Java動態(tài)代理的應(yīng)用案例：數(shù)據(jù)庫連接池
? 34、什么是RPC和RPC的實現(xiàn)
? 35、HDFS的回收站
? 36、HDFS的快照
? 37、HDFS的配額
? 38、HDFS的安全模式和權(quán)限管理
? 39、HDFS集群簡介

六、MapReduce

? 40、知識點回顧：MapReduce的編程模型和Demo演示
? 41、分析WordCount單詞計數(shù)的數(shù)據(jù)流動過程
? 42、開發(fā)自己的WordCount程序
? 43、案例分析：求每個部門的工資總額數(shù)據(jù)處理的流程
? 44、編程實現(xiàn)求每個部門的工資總額
? 45、MapReduce的序列化和案例分析
? 46、序列化編程案例：求每個部門的工資總額
? 47、基本數(shù)據(jù)類型的排序
? 48、對象進行排序
? 49、分區(qū)的基本概念
? 50、編程案例：自定義分區(qū)
? 51、什么是Combiner？
? 52、什么是Shuffle？
? 53、搭建Hadoop的Eclipse開發(fā)環(huán)境

??

七、MapReduce編程案例

? 54、案例一：去掉重復(fù)數(shù)據(jù)
? 55、知識復(fù)習：數(shù)據(jù)庫中的多表查詢
? 56、案例二：多表查詢之等值連接的分析過程
? 57、案例二：多表查詢之等值連接的MapReduce實現(xiàn)
? 58、案例三：多表查詢之自連接的分析過程
? 59、案例三：多表查詢之自連接的實現(xiàn)
? 60、案例四：分析倒排索引的實現(xiàn)過程
? 61、案例四：編程實現(xiàn)倒排索引
? 62、案例五：使用MRUnit進行單元測試
? 63、第一階段課程小結(jié)

八、NoSQL數(shù)據(jù)庫之：HBase

? 64、NoSQL簡介和常見的NoSQL數(shù)據(jù)庫
? 65、HBase體系結(jié)構(gòu)和表結(jié)構(gòu)
? 66、搭建HBase環(huán)境和實現(xiàn)HA
? 67、HBase在ZK中保存的數(shù)據(jù)和HA
? 68、使用HBase Shell操作HBase
? 69、使用JavaAPI操作HBase
? 70、HBase中數(shù)據(jù)保存的過程和Region的分裂
? 71、HBase的過濾器
? 72、HBase上的MapReduce數(shù)據(jù)的分析過程
? 73、開發(fā)HBase上的MapReduce程序

九、數(shù)據(jù)分析引擎之：Hive

? 74、Hive簡介和Hive的體系結(jié)構(gòu)
? 75、Hive的安裝和配置
? 76、Hive數(shù)據(jù)模型之：內(nèi)部表
? 77、Hive數(shù)據(jù)模型之：分區(qū)表
? 78、Hive數(shù)據(jù)模型之：外部表
? 79、Hive數(shù)據(jù)模型之：桶表
? 80、Hive數(shù)據(jù)模型之：視圖
? 81、Hive的Java客戶端
? 82、Hive的自定義函數(shù)

十、數(shù)據(jù)分析引擎之：Pig

? 83、Pig簡介和安裝配置
? 84、Pig的常用命令
? 85、Pig的數(shù)據(jù)模型
? 86、使用PigLatin語句分析數(shù)據(jù)
? 87、Pig的自定義函數(shù)一：自定義過濾函數(shù)和自定義運算函數(shù)
? 88、Pig的自定義函數(shù)二：自定義加載函數(shù)

十一、數(shù)據(jù)采集引擎：Sqoop和Flume

? 89、準備數(shù)據(jù)采集的實驗環(huán)境
? 90、使用Sqoop采集關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)
? 91、使用Flume采集日志

十二、集成管理工具：HUE

? 92、安裝和配置使用HUE

十三、Hadoop序列化框架：Avro

? 93、Avro課程概述
? 94、Java的序列化
? 95、Hadoop的序列化
? 96、Avro的數(shù)據(jù)類型和Schema
? 97、使用Schema實現(xiàn)Java的序列化
? 98、使用Schema實現(xiàn)Java的反序列化
? 99、使用Avro Tools生成Schema生成類實現(xiàn)Java的序列化
? 100、使用Avro Tools生成Schema生成類實現(xiàn)Java的反序列化
? 101、知識點回顧：Hadoop中的RPC通信
? 102、在RPC使用Avro實現(xiàn)消息的通信之一：定義消息格式Schema
? 103、在RPC使用Avro實現(xiàn)消息的通信之二：開發(fā)服務(wù)器端程序
? 104、在RPC使用Avro實現(xiàn)消息的通信之三：開發(fā)客戶端端程序
? 105、知識點回顧：Hadoop中的MapReduce
? 106、在MapReduce中使用Avro之一：定義數(shù)據(jù)格式Schema
? 107、在MapReduce中使用Avro之二：開發(fā)Mapper端程序
? 108、在MapReduce中使用Avro之三：開發(fā)Reducer端程序
? 109、在MapReduce中使用Avro之四：開發(fā)Job主程序端程序
? 110、在MapReduce中使用Avro之五：運行測試
? 111、在MapReduce任務(wù)中使用Schema的生成類

十四、工作流引擎：Oozie

? 112、Oozie課程概述與基本概念
? 113、安裝和配置Oozie
? 114、演示Oozie自帶的Example
? 115、Oozie控制節(jié)點
? 116、Oozie的動作節(jié)點之一：Fs
? 117、Oozie的動作節(jié)點之二：Java-Main
? 118、Oozie的動作節(jié)點之三：MapReduce
? 119、Oozie的動作節(jié)點之四：Sqoop
? 110、Oozie的動作節(jié)點之五：Hive
? 111、Oozie的動作節(jié)點之六：Pig
? 112、綜合案例：處理商品訂單
? 113、什么是OOzie的Coordinator
? 114、什么是OOzie的Bundle

十五、Hadoop HA的實現(xiàn)和HDFS的聯(lián)盟

? 115、上次課程復(fù)習
? 116、ZooKeeper簡介和安裝配置
? 117、HadoopHA的實現(xiàn)原理
? 118、利用ZooKeeper實現(xiàn)Hadoop的HA
? 119、上次課程復(fù)習
? 120、HDFS聯(lián)盟的體系結(jié)構(gòu)
? 121、搭建HDFS聯(lián)盟的環(huán)境
? 122、第二階段課程總結(jié)

十六、NoSQL數(shù)據(jù)庫之：Redis

? 123、Redis簡介與安裝配置
? 124、Redis的操作和適用場景
? 125、Redis的事務(wù)
? 126、Redis的消息機制
? 127、Redis的持久化
? 128、Redis集群的主從復(fù)制
? 129、Redis的HA實現(xiàn)
? 130、Redis的代理分片

十七、實時處理框架：Apache Storm

? 131、大數(shù)據(jù)實時計算簡介
? 132、Apache Storm的體系結(jié)構(gòu)
? 133、搭建Storm的偽分布模式
? 134、搭建Storm的全分布和HA
? 135、執(zhí)行Storm的Demo程序
? 136、Storm在ZK上保存的信息
? 137、WordCount數(shù)據(jù)處理的過程
? 138、開發(fā)自己的WordCount程序
? 139、Storm的Worker間通信機制
? 140、集成Redis
? 141、集成HDFS
? 142、集成HBase