班級規(guī)模及環(huán)境--熱線:4008699035 手機:15921673576( 微信同號) |
每個班級的人數(shù)限3到5人,互動授課, 保障效果,小班授課。 |
上間和地點 |
上部份地點:【上海】同濟大學(滬西)/新城金郡商務(wù)樓(11號線白銀路站)【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院【北京分部】:北京中山學院/福鑫大樓【南京分部】:金港大廈(和燕路)【武漢分部】:佳源大廈(高新二路)【成都分部】:領(lǐng)館區(qū)1號(中和大道)【沈陽分部】:沈陽理工大學/六宅臻品【鄭州分部】:鄭州大學/錦華大廈【石家莊分部】:河北科技大學/瑞景大廈 最近開間(周末班/連續(xù)班/晚班):2020年3月16日 |
實驗設(shè)備 |
◆小班教學,教學效果好 ☆注重質(zhì)量☆邊講邊練 ☆合格學員免費推薦工作 ★實驗設(shè)備請點擊這兒查看★ |
質(zhì)量保障 |
1、培訓過程中,如有部分內(nèi)容理解不透或消化不好,可免費在以后培訓班中重聽; 2、培訓結(jié)束后,授課老師留給學員聯(lián)系方式,保障培訓效果,免費提供課后技術(shù)支持。 3、培訓合格學員可享受免費推薦就業(yè)機會。☆合格學員免費頒發(fā)相關(guān)工程師等資格證書,提升職業(yè)資質(zhì)。專注高端技術(shù)培訓15年,端海學員的能力得到大家的認同,受到用人單位的廣泛贊譽,端海的證書受到廣泛認可。 |
部份程大綱 |
|
第一部份 Hive與Hadoop
(1) Hadoop和MapReduce
(2) Hadoop生態(tài)中的Hive
(3) Hive與關(guān)系型數(shù)據(jù)庫的差異
(4) Hive安裝
第二部份 Hive的特性1
(1) 內(nèi)部表與外部表
(2) insert與insert overwrite
(3) mapjoin
(4) group by/order by/partition by/sort by/cluster by
第三部份 Hive的特性2
(1) 動態(tài)分區(qū)、靜態(tài)分區(qū)
(2) streaming轉(zhuǎn)換數(shù)據(jù)
(2) 一次讀取多次插入
(3) 文件壓縮格式
第四部份 Hive的特性3
(1) UDF
(2) UDAF
(3) UDTF
第五部份 Hive調(diào)優(yōu)
(1) Hive優(yōu)化通用思路
(2) 執(zhí)行計劃
(3) Hive調(diào)優(yōu)常用方法
(3) Hive調(diào)優(yōu)案例
第六部份 Hive實戰(zhàn)
(1) 某電商網(wǎng)站,按平臺、版本、城市維度統(tǒng)計PV、UV
(2) 某電商網(wǎng)站,按平臺、版本、城市多種維度組合,統(tǒng)計PV、UV
(3) 某電商網(wǎng)站,按平臺、版本、城市多種維度組合,統(tǒng)計PV、UV、下單量、下單用戶數(shù)
第七部份 數(shù)據(jù)倉庫概要
(1) 數(shù)據(jù)倉庫起因
(2) 數(shù)據(jù)倉庫發(fā)展
(3) 數(shù)據(jù)倉庫定義
(4) 數(shù)據(jù)倉庫與數(shù)據(jù)庫的區(qū)別
第八部份 數(shù)據(jù)倉庫架構(gòu)
(1) Inmon 與 Kimball
(2) 混合架構(gòu) 與 DataVault架構(gòu)
(3) 數(shù)倉架構(gòu)選型的思考
(4) 數(shù)據(jù)倉庫分層
第九部份 數(shù)據(jù)倉庫建模
(1) 什么是數(shù)據(jù)模型
(2) 為什么需要數(shù)據(jù)模型
(3) 如何創(chuàng)建數(shù)據(jù)模型
(4) 數(shù)倉建模的方法介紹
第十部份 維度建模
(1) 維度建模基本概念
(2) 維度建模技術(shù)
(3) 維度建模過程
(4) 維度建模常見問題
第十一部份 從0到1搭建Hive數(shù)倉(上)
(1) 根據(jù)業(yè)務(wù)特點和需求,選型數(shù)據(jù)倉庫架構(gòu)
(2) 基于數(shù)倉架構(gòu)和業(yè)務(wù)處理綜合考慮,設(shè)計合理的數(shù)據(jù)倉庫分層
(3) 梳理整體的業(yè)務(wù)ER圖,選擇要建設(shè)的業(yè)務(wù)和數(shù)據(jù)范圍
(4) 確立數(shù)倉總線架構(gòu),站在較高的抽象業(yè)務(wù)分析主題
第十二部份 從0到1搭建Hive數(shù)倉(下)
(1) 按主題思想設(shè)計完整的數(shù)據(jù)倉庫模型
(2) 根據(jù)主題優(yōu)先級劃分,分階段設(shè)計數(shù)據(jù)流和數(shù)據(jù)模型
(3) 數(shù)據(jù)模型落地:Hive開發(fā)->測試>數(shù)據(jù)驗證->上線
(4) 數(shù)倉建設(shè)過程中的數(shù)據(jù)質(zhì)量和元數(shù)據(jù)管理
|