1、培訓(xùn)過程中，如有部分內(nèi)容理解不透或消化不好，可免費(fèi)在以后培訓(xùn)班中重聽；
       2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費(fèi)提供課后技術(shù)支持。
       3、培訓(xùn)合格學(xué)員可享受免費(fèi)推薦就業(yè)機(jī)會。☆合格學(xué)員免費(fèi)頒發(fā)相關(guān)工程師等資格證書，提升職業(yè)資質(zhì)。專注高端技術(shù)培訓(xùn)15年，端海學(xué)員的能力得到大家的認(rèn)同，受到用人單位的廣泛贊譽(yù)，端海的證書受到廣泛認(rèn)可。

• 培訓(xùn)對象
• 各類 IT/軟件企業(yè)和研發(fā)機(jī)構(gòu)的軟件架構(gòu)師、軟件設(shè)計(jì)師、程序員。對于懷有設(shè)計(jì)疑問和問題，需要梳理解答的團(tuán)隊(duì)和個(gè)人，效果最佳。
• 學(xué)員基礎(chǔ)
• 了解Java語言、Linux系統(tǒng)；
• 課程大綱
  
• 主題 內(nèi)容
  大數(shù)據(jù)架構(gòu)概述
• 1.1 大數(shù)據(jù)層級架構(gòu)及各層軟件設(shè)計(jì)要求，包括數(shù)據(jù)收集、存儲、計(jì)算框、應(yīng)用
  1.2 Hadoop生態(tài)系統(tǒng)概述以及版本演化，并給出版本選擇建議。
  1.3 Spark生態(tài)系統(tǒng)概述及其特點(diǎn)，并與Hadoop對比
• 數(shù)據(jù)收集系統(tǒng)Flume與Sqoop
• 2. 使用flume和sqoop兩個(gè)系統(tǒng)將外部流式數(shù)據(jù)（比如網(wǎng)站日志，用戶行為數(shù)據(jù)等）、關(guān)系型數(shù)據(jù)庫（比如MySQL、Oracle等）中的數(shù)據(jù)導(dǎo)入Hadoop中進(jìn)行分析和挖掘
• 大數(shù)據(jù)存儲系統(tǒng)HDFS與HBase
• 3.1與HDFS 1.0進(jìn)行對比介紹2.0原理、特性與基本架構(gòu)（快照、緩存、異構(gòu)存儲）。
  3.2 HBase原理，基本架構(gòu)與案例分析
  3.3 HBase應(yīng)用場景、原理和架構(gòu)，典型應(yīng)用案例（互聯(lián)網(wǎng)、銀行）
• 集群資源管理與調(diào)度系統(tǒng)
• 4. 介紹 YARN應(yīng)用場景、基本架構(gòu)與資源調(diào)度
• Zookeeper部署及典型應(yīng)用
• 5. 介紹Zookeeper是什么，基本原理及在應(yīng)用
• 大數(shù)據(jù)計(jì)算平臺
• 介紹主流的三大類大數(shù)據(jù)計(jì)算框架，分別是批處理、交互式計(jì)算和流式計(jì)算框架，并選取當(dāng)下主流的開源實(shí)現(xiàn)進(jìn)行介紹。
  6.1 批處理計(jì)算框架
  （1）MapReduce 2.0基本原理與架構(gòu)、程序編寫（使用java、C++、php語言）。
  （2）數(shù)據(jù)分析系統(tǒng)Hive與Pig應(yīng)用與比較，如何使用其中的海量數(shù)據(jù)
  （3）Spark計(jì)算框架，背景及應(yīng)用案例
  6.2 交互式計(jì)算框架，Impala和presto應(yīng)用場景，基本架構(gòu)和典型應(yīng)用案例
  6.3 流式/實(shí)時(shí)計(jì)算框架，storm、Spark Streaming基本架構(gòu)特點(diǎn)，及應(yīng)用案例
• 數(shù)據(jù)挖掘與機(jī)器學(xué)習(xí)庫
• 7. Mahout與MLlib兩個(gè)主流的分布式數(shù)據(jù)挖掘與機(jī)器學(xué)習(xí)庫的實(shí)現(xiàn)以及應(yīng)用案例。