班級規(guī)模及環(huán)境--熱線:4008699035 手機:15921673576( 微信同號) |
每個班級的人數(shù)限3到5人,互動授課, 保障效果,小班授課。 |
上間和地點 |
上部份地點:【上海】同濟大學(滬西)/新城金郡商務(wù)樓(11號線白銀路站)【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院【北京分部】:北京中山學院/福鑫大樓【南京分部】:金港大廈(和燕路)【武漢分部】:佳源大廈(高新二路)【成都分部】:領(lǐng)館區(qū)1號(中和大道)【沈陽分部】:沈陽理工大學/六宅臻品【鄭州分部】:鄭州大學/錦華大廈【石家莊分部】:河北科技大學/瑞景大廈 最近開間(周末班/連續(xù)班/晚班):2019年1月26日 |
實驗設(shè)備 |
◆小班教學,教學效果好 ☆注重質(zhì)量☆邊講邊練 ☆合格學員免費推薦工作 ★實驗設(shè)備請點擊這兒查看★ |
質(zhì)量保障 |
1、培訓過程中,如有部分內(nèi)容理解不透或消化不好,可免費在以后培訓班中重聽; 2、培訓結(jié)束后,授課老師留給學員聯(lián)系方式,保障培訓效果,免費提供課后技術(shù)支持。 3、培訓合格學員可享受免費推薦就業(yè)機會。☆合格學員免費頒發(fā)相關(guān)工程師等資格證書,提升職業(yè)資質(zhì)。專注高端技術(shù)培訓15年,端海學員的能力得到大家的認同,受到用人單位的廣泛贊譽,端海的證書受到廣泛認可。 |
部份程大綱 |
|
- 目標收益
NiFi這個項目在2015年7月成功成為Apache開源社區(qū)的頂級項目,NiFi之前是在美國國家安全局使用了8年的一個可視化,可定制的數(shù)據(jù)集成產(chǎn)品,2014年貢獻給了Apache開源社區(qū)。我們認為NiFi的出現(xiàn)填補的大數(shù)據(jù)集成領(lǐng)域的空白, 它不僅提供了可視化的工具實現(xiàn)大數(shù)據(jù)環(huán)境下不同系統(tǒng)之間進行數(shù)據(jù)移動和互聯(lián)互通如SQL,HDFS,Kafka, HBASE, Solr,HTTP(s)、(s)FTP 而且還可以以可視化的方式進行各種數(shù)據(jù)格式的轉(zhuǎn)換,json,xml,avro等。NiFi的出現(xiàn)使得大數(shù)據(jù)環(huán)境下的數(shù)據(jù)移動變得簡單、高效、安全、可視 化,大大方便了業(yè)務(wù)和開發(fā)人員。
- 培訓對象
- 大數(shù)據(jù)開發(fā)團隊、大數(shù)據(jù)運維團隊、數(shù)據(jù)采集和ETL人員、數(shù)據(jù)治理和管理人員
- 課程大綱
- 主題 內(nèi)容
模塊 1:Nifi原理和架構(gòu)
- Nifi的功能概述
Nifi原理和架構(gòu)
Nifi基本模塊介紹
Nifi Groups、Processor、queue和connector模塊介紹
Nifi toolbar 界面演示
- 模塊2:Nifi安裝和配置
- Nifi單機版安裝
Nifi分布式安裝
Nifi slaves節(jié)點配置
數(shù)據(jù)丟失容錯和保證交付
低延遲和高吞吐量
動態(tài)優(yōu)先級
流可以在運行時修改
- 模塊3:GUI 操作介紹
- 無縫體驗設(shè)計、控制和監(jiān)視
processor的create、stop、start、restart、delete等操作
- 模塊4:Nifi自帶處理器介紹
- Processor的原理和功能
Kafka Processor介紹和實戰(zhàn)
JMS Processor介紹和實戰(zhàn)
Hbase、Cassandera、redis Processor介紹和實戰(zhàn)
Hdfs Processor、spark Streaming實戰(zhàn)
JDBC Processor介紹和實戰(zhàn)
FTP、Http、XML、Json Processor介紹和實戰(zhàn)
- 模塊5:創(chuàng)建Nifi數(shù)據(jù)流
- 創(chuàng)建發(fā)送/接收目錄
getFile和putFile Processor創(chuàng)建
創(chuàng)建復制文件從發(fā)送放到接收
創(chuàng)建Queue隊列
- 模塊6:創(chuàng)建高級數(shù)據(jù)流
- 自定義文件名
添加自定義屬性
添加正則表達式
實現(xiàn)Path過濾規(guī)則
- 模塊7:Nifi安全
- 創(chuàng)建用戶、用戶組、角色
SSL,SSH,HTTPS加密認證
可插拔的基于角色的驗證/授權(quán)
基于webUI的SLA認證授權(quán)
- 模塊8:創(chuàng)建Nifi處理器
- 實現(xiàn)一個Kafka、JMS到HDFS的流程設(shè)計
查看運行日志
查看監(jiān)控
- 模塊9:Nifi集群配置和管理
- Nifi集群添加節(jié)點
刪除節(jié)點
Nifi性能優(yōu)化
Slaves節(jié)點的負載均衡配置
制定特定的Processor到特定的node節(jié)點
集群動態(tài)負載均衡配置
- 模塊10:用戶自定義處理器
- eclipse工程創(chuàng)建
實現(xiàn)一個FilterFileProcessor功能
編譯&添加到Nifi的lib下面
創(chuàng)建用戶自定義的FilterFile處理器
- 模塊11:Nifi實戰(zhàn)
- Nifi在互聯(lián)網(wǎng)的使用實戰(zhàn)
Nifi在某大型商業(yè)銀行實戰(zhàn)案例分享
|