曙海教育集團
全國報名免費熱線:4008699035 微信:shuhaipeixun
或15921673576(微信同號) QQ:1299983702
首頁 課程表 在線聊 報名 講師 品牌 QQ聊 活動 就業
 
Storm與大數據實戰課程

 
  班級規模及環境--熱線:4008699035 手機:15921673576( 微信同號)
      每個班級的人數限3到5人,互動授課, 保障效果,小班授課。
  上間和地點
上部份地點:【上海】同濟大學(滬西)/新城金郡商務樓(11號線白銀路站)【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學成教院【北京分部】:北京中山學院/福鑫大樓【南京分部】:金港大廈(和燕路)【武漢分部】:佳源大廈(高新二路)【成都分部】:領館區1號(中和大道)【沈陽分部】:沈陽理工大學/六宅臻品【鄭州分部】:鄭州大學/錦華大廈【石家莊分部】:河北科技大學/瑞景大廈
最近開間(周末班/連續班/晚班):2020年3月16日
  實驗設備
    ◆小班教學,教學效果好
       
       ☆注重質量☆邊講邊練

       ☆合格學員免費推薦工作
       ★實驗設備請點擊這兒查看★
  質量保障

       1、培訓過程中,如有部分內容理解不透或消化不好,可免費在以后培訓班中重聽;
       2、培訓結束后,授課老師留給學員聯系方式,保障培訓效果,免費提供課后技術支持。
       3、培訓合格學員可享受免費推薦就業機會。☆合格學員免費頒發相關工程師等資格證書,提升職業資質。專注高端技術培訓15年,端海學員的能力得到大家的認同,受到用人單位的廣泛贊譽,端海的證書受到廣泛認可。

部份程大綱
 
  • 在大數據的批處理領域,Hadoop是不可撼動的王者,然而在實時性上的延遲,Hadoop卻是其天生的不足,為完善大數據實時性處理的需求,業界進行了不少的嘗試,如Facebook在2011年發表的論文“Apache Hadoop Goes Realtime at Facebook”中介紹了其基于Hadoop上進行實時性系統的相關改進,同時開發了Puma對網站用戶進行實時分析以便對自己的產品或服務進行營銷,為解決廣告計費(cost-per-click)Yahoo啟動了S4用于實時計算、預測用戶對廣告的可能的點擊行為,LinkedIn則基于Kafka開發了Samza用于實時新聞推送、廣告和復雜的監控等,而Storm是由Twitter開源的實時計算框架,適用于實時分析、在線機器學習、連續計算、分布式RPC和ETL等場景。

  • 第一節:實時計算平臺介紹
    介紹實時系統主要解決的業務問題和面臨的挑戰;
    簡要介紹實時平臺的主要組件和構成,實時數據的收集通道和數據交互方式
    實時數據核心組件Flume、Kafka的介紹,以及Storm在整個平臺中所處的位置;
    分享部分典型互聯網公司實時平臺的架構,如大眾點評、美團、一號店等
  • 第二節:Storm基本概念和組件介紹
    Storm的基本組件:Nimbus、Supervisor、Worker、 Executor和Task的基本介紹;
    集群組成:通常一個線上集群的如何構成;
    Storm的可靠性:Storm如何保證可靠性以及數據的準確性;
    Storm的數據分組和其他特性介紹;
  • 第三節:Storm集群部署和配置
    Storm的依賴組件介紹;
    Storm的部署軟硬件環境要求;
    部署ZooKeeper
    部署Storm到各個機器節點
    配置Storm相關參數,以及核心參數介紹;
    啟動Storm相關進程;
    Storm的守護進程;
    提交Topology的過程介紹。
  • 第四節:Storm基本應用的開發
    Storm的應用開發和調試過程介紹,包括:
    提交示例Topology到集群;
    項目代碼本地開發環境配置和依賴;
    代碼編譯和打包以及注意事項;
    本地代碼調試過程;
    線上Topology提交過程和問題分析。
  • 第五節:Storm Nimbus和Supervisor深入剖析
    Nimbus功能介紹和啟動Nimbus服務過程分析;
    Nimbus服務的執行過程剖析;
    分配Executor的算法;
    調度器介紹;
    默認調度器DefaultScheduler和均衡調度器EvenScheduler邏輯分析;
    Supervisor數據結構分析;
    Supervisor的執行過程詳解。
  • 第六節:Storm Worker、Executor和Task深入分析
    Worker的數據結構和架構;
    Worker中的數據流分解;
    創建Worker的過程;
    Executor的創建過程;
    創建Spout的Executor的過程和邏輯;
    創建Bolt的Executor的過程和邏輯;
    Task的創建過程;
    Ack的原理介紹;
    Acker Bolt的實現。
  • 第七節:Storm運維和監控
    主機信息監控;
    日志和監控;
    Storm UI和NimbusClient的使用;
    Storm Metric的使用;
    Storm ZooKeeper的目錄詳解和功能分析;
    Storm Hook的使用。
  • 第八節:Storm的擴展和二次開發
    Storm UI原生功能介紹和數據含義;
    Storm UI新功能需求實現;
    Storm的Thrift接口介紹;
    資源隔離方案簡介;
    基于CGroup的資源隔離的實現;
    使用Docker運行Storm集群介紹。
  • 第九節:Storm的實際應用案例分享
    實時DAU計算實現;
    實時用戶畫像;
    實時個性化推薦;
    廣告投放的精準化
  • 第十節:Storm使用經驗和性能優化
    使用經驗;
    性能優化建議;
    自定義metric和性能數據收集
  • 第十一節:其他實時平臺介紹
    JStorm介紹;
    Spark Streaming介紹;
    Heron介紹;
    Flink介紹;
    Storm和其他實時流處理框架的功能和性能對比
 

-

 

  備案號:備案號:滬ICP備08026168號-1 .(2024年07月24日)....................
友情鏈接:Cadence培訓 ICEPAK培訓 EMC培訓 電磁兼容培訓 sas容培訓 羅克韋爾PLC培訓 歐姆龍PLC培訓 PLC培訓 三菱PLC培訓 西門子PLC培訓 dcs培訓 橫河dcs培訓 艾默生培訓 robot CAD培訓 eplan培訓 dcs培訓 電路板設計培訓 浙大dcs培訓 PCB設計培訓 adams培訓 fluent培訓系列課程 培訓機構課程短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班培訓 南京 NS3培訓 OpenGL培訓 FPGA培訓 PCIE培訓 MTK培訓 Cortex訓 Arduino培訓 單片機培訓 EMC培訓 信號完整性培訓 電源設計培訓 電機控制培訓 LabVIEW培訓 OPENCV培訓 集成電路培訓 UVM驗證培訓 VxWorks培訓 CST培訓 PLC培訓 Python培訓 ANSYS培訓 VB語言培訓 HFSS培訓 SAS培訓 Ansys培訓 短期培訓系列課程培訓機構 長期課程列表實踐課程高級課程學校培訓機構周末班 端海 教育 企業 學院 培訓課程 系列班 長期課程列表實踐課程高級課程學校培訓機構周末班 短期培訓系列課程培訓機構 端海教育企業學院培訓課程 系列班
主站蜘蛛池模板: 色综合久久夜色精品国产| 亚洲 自拍 另类小说综合图区| 国产精品天干天干综合网| 国产精品 综合 第五页| 狠狠色丁香婷婷综合久久来来去| 婷婷综合久久中文字幕蜜桃三电影| 国产香蕉久久精品综合网| 精品综合久久久久久88小说| 亚洲VA欧美va国产va综合| 老色鬼久久亚洲AV综合| 日本一道综合色视频| 久久婷婷综合中文字幕| 色噜噜狠狠色综合久| 综合欧美亚洲日本| 97久久天天综合色天天综合色hd| 色天使久久综合网天天| 久久综合一区二区无码| 亚洲高清无码综合性爱视频| 亚洲综合无码AV一区二区| 国产精品九九久久精品女同亚洲欧美日韩综合区| 色综合天天综合狠狠| 91成人亚洲综合欧美日韩| 亚洲Av综合色区无码专区桃色| 久久久久综合国产欧美一区二区| 国产欧美日韩综合一区在线播放| 国产欧美综合一区二区三区| 国产精品天干天干在线综合| 亚洲欧美成人久久综合中文网| 婷婷亚洲综合五月天小说| 欧美日韩国产综合视频在线看| 国产福利电影一区二区三区久久久久成人精品综合| 综合久久一区二区三区| 婷婷色中文字幕综合在线| 亚洲综合日韩中文字幕v在线| 亚洲综合国产一区二区三区| 久久综合给合综合久久| 伊人亚洲综合网| 精品综合久久久久久888蜜芽| 日韩欧美国产综合在线播放| 激情综合五月天| 色综合视频一区二区三区|