班級(jí)規(guī)模及環(huán)境--熱線:4008699035 手機(jī):15921673576( 微信同號(hào)) |
每期人數(shù)限3到5人。 |
上課時(shí)間和地點(diǎn) |
上課地點(diǎn):【上海】:同濟(jì)大學(xué)(滬西)/新城金郡商務(wù)樓(11號(hào)線白銀路站) 【深圳分部】:電影大廈(地鐵一號(hào)線大劇院站)/深圳大學(xué)成教院 【北京分部】:北京中山學(xué)院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領(lǐng)館區(qū)1號(hào)(中和大道) 【沈陽(yáng)分部】:沈陽(yáng)理工大學(xué)/六宅臻品 【鄭州分部】:鄭州大學(xué)/錦華大廈 【石家莊分部】:河北科技大學(xué)/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協(xié)同大廈
最近開課時(shí)間(周末班/連續(xù)班/晚班):2020年3月16日 |
實(shí)驗(yàn)設(shè)備 |
☆資深工程師授課
☆注重質(zhì)量
☆邊講邊練
☆合格學(xué)員免費(fèi)推薦工作
★實(shí)驗(yàn)設(shè)備請(qǐng)點(diǎn)擊這兒查看★ |
質(zhì)量保障 |
1、培訓(xùn)過(guò)程中,如有部分內(nèi)容理解不透或消化不好,可免費(fèi)在以后培訓(xùn)班中重聽;
2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費(fèi)提供課后技術(shù)支持。
3、培訓(xùn)合格學(xué)員可享受免費(fèi)推薦就業(yè)機(jī)會(huì)。 |
課程大綱 |
|
- 云計(jì)算分布式大數(shù)據(jù)Hive數(shù)據(jù)倉(cāng)庫(kù)最佳實(shí)踐培訓(xùn)
?
云計(jì)算分布式大數(shù)據(jù)Hive數(shù)據(jù)倉(cāng)庫(kù)最佳實(shí)踐培訓(xùn)
課程大綱:
第一部分:
第1個(gè)主題:云計(jì)算的四大核心技術(shù)
HDFS、MapReduce、HBase、Hive
第2個(gè)主題:Hive集群與管理
1、Hadoop集群的搭建
2、Hadoop集群的監(jiān)控
3、Hadoop集群的管理
4、集群下運(yùn)行MapReduce程序
5、安裝并啟動(dòng)Hive
6、測(cè)試Hive
第3主題:Hive的命令、數(shù)據(jù)類型和文件格式
1、Hive的CLI
2、Hive的集合數(shù)據(jù)類型
3、編碼和模式
第4主題:開發(fā)Hive
1.?連接Java調(diào)試器到Hive
2.?通過(guò)Eclipse來(lái)開發(fā)Hive代碼
3.?Hive的單元測(cè)試
第5題:HQL
1.?HQL的數(shù)據(jù)定義
2.?使用HQL操作數(shù)據(jù)
3.?深入HQL查詢
第6題:HQL的視圖和索引
1、HQL的視圖:降低查詢的復(fù)雜度和限定特定的條件
2、HQL的索引:索引的創(chuàng)建和管理、定制索引
第二部分:
第1個(gè)主題:Hive中的函數(shù)
1.?使用Hive中已有的函數(shù)
2.?自定義聚合函數(shù)
3.?自定義表生成函數(shù)
4.?在自定義函數(shù)中訪問緩存
第2個(gè)主題:Hive的存儲(chǔ)過(guò)程
1、為何需要Hive中的存儲(chǔ)過(guò)程
2、?在后臺(tái)中運(yùn)行的存儲(chǔ)過(guò)程
3、HiveStorageHandler
4、?存儲(chǔ)過(guò)程的具體編寫和使用
第3個(gè)主題:Hive架構(gòu)優(yōu)化
1、?降低IO負(fù)載
2、?表的分區(qū)、動(dòng)態(tài)分區(qū)
3、?壓縮
4、分布式緩存
第4個(gè)主題:徹底優(yōu)化HQL
1、?HQL優(yōu)化的具體策略和方式
2、?Map和Reduce
3、數(shù)據(jù)傾斜
4,執(zhí)行計(jì)劃
第5個(gè)主題:在AWS上使用Hive
1.?使用并管理EMR?Hive集群
2.?EMR集群的詳細(xì)配置
3.持久層、元數(shù)據(jù)
4.集群中的HDFS和S3(配置、日志等)
第6個(gè)主題:Hive的Thrift
1.?配置、啟動(dòng)、使用Thrift
2.?Thrift的管理
3.?管理Hive?Server
4.ThriftMetaStore
?
? ?
?
?
?
?
?
"
|