班級(jí)規(guī)模及環(huán)境--熱線:4008699035 手機(jī):15921673576( 微信同號(hào)) |
每期人數(shù)限3到5人。 |
上課時(shí)間和地點(diǎn) |
上課地點(diǎn):【上海】:同濟(jì)大學(xué)(滬西)/新城金郡商務(wù)樓(11號(hào)線白銀路站) 【深圳分部】:電影大廈(地鐵一號(hào)線大劇院站)/深圳大學(xué)成教院 【北京分部】:北京中山學(xué)院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領(lǐng)館區(qū)1號(hào)(中和大道) 【沈陽(yáng)分部】:沈陽(yáng)理工大學(xué)/六宅臻品 【鄭州分部】:鄭州大學(xué)/錦華大廈 【石家莊分部】:河北科技大學(xué)/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協(xié)同大廈
最近開(kāi)課時(shí)間(周末班/連續(xù)班/晚班):2020年3月16日 |
實(shí)驗(yàn)設(shè)備 |
☆資深工程師授課
☆注重質(zhì)量
☆邊講邊練
☆合格學(xué)員免費(fèi)推薦工作
★實(shí)驗(yàn)設(shè)備請(qǐng)點(diǎn)擊這兒查看★ |
質(zhì)量保障 |
1、培訓(xùn)過(guò)程中,如有部分內(nèi)容理解不透或消化不好,可免費(fèi)在以后培訓(xùn)班中重聽(tīng);
2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費(fèi)提供課后技術(shù)支持。
3、培訓(xùn)合格學(xué)員可享受免費(fèi)推薦就業(yè)機(jī)會(huì)。 |
課程大綱 |
|
- 目標(biāo)收益
NiFi這個(gè)項(xiàng)目在2015年7月成功成為Apache開(kāi)源社區(qū)的頂級(jí)項(xiàng)目,NiFi之前是在美國(guó)國(guó)家安全局使用了8年的一個(gè)可視化,可定制的數(shù)據(jù)集成產(chǎn)品,2014年貢獻(xiàn)給了Apache開(kāi)源社區(qū)。我們認(rèn)為NiFi的出現(xiàn)填補(bǔ)的大數(shù)據(jù)集成領(lǐng)域的空白, 它不僅提供了可視化的工具實(shí)現(xiàn)大數(shù)據(jù)環(huán)境下不同系統(tǒng)之間進(jìn)行數(shù)據(jù)移動(dòng)和互聯(lián)互通如SQL,HDFS,Kafka, HBASE, Solr,HTTP(s)、(s)FTP 而且還可以以可視化的方式進(jìn)行各種數(shù)據(jù)格式的轉(zhuǎn)換,json,xml,avro等。NiFi的出現(xiàn)使得大數(shù)據(jù)環(huán)境下的數(shù)據(jù)移動(dòng)變得簡(jiǎn)單、高效、安全、可視 化,大大方便了業(yè)務(wù)和開(kāi)發(fā)人員。
- 培訓(xùn)對(duì)象
- 大數(shù)據(jù)開(kāi)發(fā)團(tuán)隊(duì)、大數(shù)據(jù)運(yùn)維團(tuán)隊(duì)、數(shù)據(jù)采集和ETL人員、數(shù)據(jù)治理和管理人員
- 課程大綱
?
- 主題 內(nèi)容
模塊 1:Nifi原理和架構(gòu)
- Nifi的功能概述
Nifi原理和架構(gòu)?
Nifi基本模塊介紹
Nifi Groups、Processor、queue和connector模塊介紹
Nifi toolbar 界面演示
- 模塊2:Nifi安裝和配置
- Nifi單機(jī)版安裝
Nifi分布式安裝
Nifi slaves節(jié)點(diǎn)配置
數(shù)據(jù)丟失容錯(cuò)和保證交付?
低延遲和高吞吐量
動(dòng)態(tài)優(yōu)先級(jí)?
流可以在運(yùn)行時(shí)修改?
- 模塊3:GUI 操作介紹
- 無(wú)縫體驗(yàn)設(shè)計(jì)、控制和監(jiān)視
processor的create、stop、start、restart、delete等操作
- 模塊4:Nifi自帶處理器介紹
- Processor的原理和功能
Kafka Processor介紹和實(shí)戰(zhàn)
JMS Processor介紹和實(shí)戰(zhàn)
Hbase、Cassandera、redis Processor介紹和實(shí)戰(zhàn)
Hdfs Processor、spark Streaming實(shí)戰(zhàn)
JDBC Processor介紹和實(shí)戰(zhàn)
FTP、Http、XML、Json Processor介紹和實(shí)戰(zhàn)
- 模塊5:創(chuàng)建Nifi數(shù)據(jù)流
- 創(chuàng)建發(fā)送/接收目錄
getFile和putFile Processor創(chuàng)建
創(chuàng)建復(fù)制文件從發(fā)送放到接收
創(chuàng)建Queue隊(duì)列
- 模塊6:創(chuàng)建高級(jí)數(shù)據(jù)流
- 自定義文件名
添加自定義屬性
添加正則表達(dá)式
實(shí)現(xiàn)Path過(guò)濾規(guī)則
- 模塊7:Nifi安全
- 創(chuàng)建用戶、用戶組、角色?
SSL,SSH,HTTPS加密認(rèn)證
可插拔的基于角色的驗(yàn)證/授權(quán)
基于webUI的SLA認(rèn)證授權(quán)?
- 模塊8:創(chuàng)建Nifi處理器
- 實(shí)現(xiàn)一個(gè)Kafka、JMS到HDFS的流程設(shè)計(jì)
查看運(yùn)行日志
查看監(jiān)控
- 模塊9:Nifi集群配置和管理
- Nifi集群添加節(jié)點(diǎn)
刪除節(jié)點(diǎn)
Nifi性能優(yōu)化
Slaves節(jié)點(diǎn)的負(fù)載均衡配置
制定特定的Processor到特定的node節(jié)點(diǎn)
集群動(dòng)態(tài)負(fù)載均衡配置
- 模塊10:用戶自定義處理器
- eclipse工程創(chuàng)建
實(shí)現(xiàn)一個(gè)FilterFileProcessor功能
編譯&添加到Nifi的lib下面
創(chuàng)建用戶自定義的FilterFile處理器
- 模塊11:Nifi實(shí)戰(zhàn)
- Nifi在互聯(lián)網(wǎng)的使用實(shí)戰(zhàn)
Nifi在某大型商業(yè)銀行實(shí)戰(zhàn)案例分享
?
?
?
?
? ?????
?
? ;
?
?
?
?
?
"
?
?
?
?
?
?
?
?
|