曙海教育集團
全國報名免費熱線:4008699035 微信:shuhaipeixun
或15921673576(微信同號) QQ:1299983702
首頁 課程表 在線聊 報名 講師 品牌 QQ聊 活動 就業(yè)
 
Spark大數(shù)據(jù)處理及機器學(xué)習(xí)課程

 
   班級規(guī)模及環(huán)境--熱線:4008699035 手機:15921673576( 微信同號)
       每期人數(shù)限3到5人。
   上課時間和地點
上課地點:【上海】:同濟大學(xué)(滬西)/新城金郡商務(wù)樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學(xué)成教院 【北京分部】:北京中山學(xué)院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領(lǐng)館區(qū)1號(中和大道) 【沈陽分部】:沈陽理工大學(xué)/六宅臻品 【鄭州分部】:鄭州大學(xué)/錦華大廈 【石家莊分部】:河北科技大學(xué)/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協(xié)同大廈
最近開課時間(周末班/連續(xù)班/晚班):2020年3月16日
   實驗設(shè)備
     ☆資深工程師授課
        
        ☆注重質(zhì)量 ☆邊講邊練

        ☆合格學(xué)員免費推薦工作
        ★實驗設(shè)備請點擊這兒查看★
   質(zhì)量保障

        1、培訓(xùn)過程中,如有部分內(nèi)容理解不透或消化不好,可免費在以后培訓(xùn)班中重聽;
        2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費提供課后技術(shù)支持。
        3、培訓(xùn)合格學(xué)員可享受免費推薦就業(yè)機會。

課程大綱
 
第1章課程簡介
1-1課程簡介
第2章Docker知識快速入門
2-1什么是Docker技術(shù)
2-2為什么要使用Docker
2-3Docker中的基本概念
2-4Docker安裝
2-5Docker獲取鏡像
2-6Docker創(chuàng)建鏡像(1)
2-7Docker創(chuàng)建鏡像(2)
2-8Docker本地導(dǎo)入鏡像
2-9Docker保存、載入、刪除鏡像
2-10Docker容器的創(chuàng)建啟動和停止
2-11Docker命令進入容器后臺
2-12Docker命令導(dǎo)入導(dǎo)出和刪除容器
2-13Docker公有倉庫Docker Hub
2-14Docker私有倉庫的創(chuàng)建
2-15Docker中的數(shù)據(jù)卷
2-16Docker制作數(shù)據(jù)卷容器
2-17Docker數(shù)據(jù)卷容器實現(xiàn)備份恢復(fù)及遷移
2-18Docker容器綁定外部端口和IP
2-19Docker容器互聯(lián)
2-20Docker一個完整的例子
2-21Dockerfile基本結(jié)構(gòu)講解
2-22Dockerfile中常見指令講解
第3章Docker搭建Spark學(xué)習(xí)環(huán)境,一鍵部署So easy!
3-1Spark課程前言
3-2Spark基礎(chǔ)核心概念講解
3-3鏡像制作方案和集群網(wǎng)絡(luò)規(guī)劃及子網(wǎng)配置和SSH無密鑰登錄規(guī)
3-4Hadoop、HDFS、Yarn配置文件詳解
3-5Spark及Hive配置文件詳解
3-6Dockerfile制作Hadoop/Spark/Hive鏡
3-7啟動5個容器并啟動Hadoop、Spark、Hive
第4章PySpark基礎(chǔ)及運行原理快速入門,細(xì)致詳盡!
4-1pyspark模塊介紹
4-2SparkContext編程入口及Accumulator
4-3addFile方法和SparkFiles的get方法
4-4binaryFiles讀取二進制文件
4-5Broadcast廣播變量和setLogLevel日志級別
4-6文件的讀取和保存及runJob方法和parallelize
4-7union方法和statusTracker方法講解
4-8aggregate和aggregateByKey的異同
4-9collectAsMap和fold方法的理解及正確使用
4-10foreach和foreachPartitions原理
4-11histogram和lookup方法的使用詳解
4-12reduce、sampleStdev等方法的使用詳解
4-13sequenceFile序列文件的保存和讀取
4-14takeSample、treeAggregate方法使用
4-15coalesce、repartition方法使用技巧
4-16cogroup、combineByKey、reduceByK
4-17foldByKey、groupBy、groupWith幾個方
4-18集合操作intersection、subtract、unio
4-19join、fullOuterJoin等RDD關(guān)聯(lián)操作
4-20glom、mapPartitions、mapValues等方
4-21pipe、randomSplit、sampleByKey、s
4-22sortBy、sortByKey、values、zip、zi
4-23StorageLevel中常見的存儲級別
4-24SparkConf對象詳解
4-25廣播變量深入講解
4-26Accumulator累加器詳解
4-27StatusTracker Spark作業(yè)運行狀態(tài)監(jiān)控
第5章pyspark之SparkSQL入門到精通
5-1pyspark之SparkSQL模塊介紹
5-2SparkSession編程入口
5-3掌握創(chuàng)建DataFrame的8種方式
5-4range和udf用戶自定義函數(shù)講解
5-5agg聚合方法及數(shù)據(jù)緩存方法cache的講解
5-6colRegex及corr計算皮爾森相關(guān)系數(shù)
5-7crossJoin笛卡爾積和cube多維數(shù)據(jù)立方體
5-8explain、dropna及filter和where算子詳
5-9groupBy、intersect、join方法詳解
5-10rollup、replace和randomSplit方法講解
5-11summary統(tǒng)計方法及toPandas轉(zhuǎn)換為Pandas對
5-12GroupedData 對象
5-13DataFrame中的Column對象(上)
5-14DataFrame中的Columns對象(下)
5-15Catalog對象詳解
5-16Row對象詳解
5-17DataFrameNaFunctions空數(shù)據(jù)處理方法集合
5-18DataFrameStatFunctions統(tǒng)計模塊詳解
5-19DataFrameReader讀取外部數(shù)據(jù)生成DF
5-20DataFrameWriter將DF數(shù)據(jù)寫入外部存儲
5-21types 類型詳解
5-22functions 函數(shù)模塊詳解
第6章PySpark 機器學(xué)習(xí)模塊
6-1本地密集、稀疏向量和LabeledPoint向量
6-2本地矩陣和四種分布式矩陣
6-3Statistics基本的統(tǒng)計方法
6-4假設(shè)檢驗、隨機數(shù)據(jù)的生成和核密度估計
6-5Piplines構(gòu)建機器學(xué)習(xí)工作流
6-6TF-IDF詞頻你文檔數(shù)和Word2vec詞向量表示
6-7CountVectorizer和Tokenizer和正則特征
6-8PCA主成分分析、多項式核函數(shù)擴展特征空間、數(shù)據(jù)正則化、特征
6-9分桶器、向量組合器、SQL轉(zhuǎn)換器及元素放縮器
6-10特征個數(shù)過濾器、缺失值處理器、類別編碼器、向量類別判斷器
6-11邏輯回歸算法、原理、公式推導(dǎo)及二分類和多分類實踐
6-12完全理解L1,L2正則化及其作用
6-13決策樹算法原理、隨機深林、梯度提升樹代碼實踐
6-14多層感知機分類算法
6-15SVM支持向量機分類算法
6-16OneVsRest多分類算法
6-17Naive Bayes 樸素貝葉斯分類器
6-18Linear Regression線性回歸
6-19GLMs廣義線性模型
6-20回歸樹
6-21K-Means聚類算法
6-22二分K均值算法
6-23GMM高斯混合模型0
6-24基于ALS交替最小二乘法的協(xié)同過濾推薦算法電影推薦實踐
6-25FP-Growth頻繁項集推薦算法
6-26超參數(shù)網(wǎng)格搜索

 

 
  備案號:備案號:滬ICP備08026168號-1 .(2024年07月24日)....................
友情鏈接:Cadence培訓(xùn) ICEPAK培訓(xùn) EMC培訓(xùn) 電磁兼容培訓(xùn) sas容培訓(xùn) 羅克韋爾PLC培訓(xùn) 歐姆龍PLC培訓(xùn) PLC培訓(xùn) 三菱PLC培訓(xùn) 西門子PLC培訓(xùn) dcs培訓(xùn) 橫河dcs培訓(xùn) 艾默生培訓(xùn) robot CAD培訓(xùn) eplan培訓(xùn) dcs培訓(xùn) 電路板設(shè)計培訓(xùn) 浙大dcs培訓(xùn) PCB設(shè)計培訓(xùn) adams培訓(xùn) fluent培訓(xùn)系列課程 培訓(xùn)機構(gòu)課程短期培訓(xùn)系列課程培訓(xùn)機構(gòu) 長期課程列表實踐課程高級課程學(xué)校培訓(xùn)機構(gòu)周末班培訓(xùn) 南京 NS3培訓(xùn) OpenGL培訓(xùn) FPGA培訓(xùn) PCIE培訓(xùn) MTK培訓(xùn) Cortex訓(xùn) Arduino培訓(xùn) 單片機培訓(xùn) EMC培訓(xùn) 信號完整性培訓(xùn) 電源設(shè)計培訓(xùn) 電機控制培訓(xùn) LabVIEW培訓(xùn) OPENCV培訓(xùn) 集成電路培訓(xùn) UVM驗證培訓(xùn) VxWorks培訓(xùn) CST培訓(xùn) PLC培訓(xùn) Python培訓(xùn) ANSYS培訓(xùn) VB語言培訓(xùn) HFSS培訓(xùn) SAS培訓(xùn) Ansys培訓(xùn) 短期培訓(xùn)系列課程培訓(xùn)機構(gòu) 長期課程列表實踐課程高級課程學(xué)校培訓(xùn)機構(gòu)周末班 端海 教育 企業(yè) 學(xué)院 培訓(xùn)課程 系列班 長期課程列表實踐課程高級課程學(xué)校培訓(xùn)機構(gòu)周末班 短期培訓(xùn)系列課程培訓(xùn)機構(gòu) 端海教育企業(yè)學(xué)院培訓(xùn)課程 系列班
主站蜘蛛池模板: 色天使亚洲综合在线观看| 色天使亚洲综合在线观看| 亚洲国产天堂久久综合网站| 色综合久久88色综合天天 | 亚洲第一页综合图片自拍| 97久久综合精品久久久综合| 色五月丁香六月欧美综合图片| 色综合婷婷99| 一本大道加勒比久久综合| 亚洲综合久久综合激情久久| 狠狠色噜噜狠狠狠狠狠色综合久久| 高清欧美色欧美综合网站| 综合激情五月综合激情五月激情1| 欧美偷窥清纯综合图区| 国产亚洲综合久久系列| 国产色综合一区二区三区| 亚洲综合区小说区激情区| 亚洲综合图片区| 丁香五月缴情综合网| 一个色综合久久| 亚洲欧美成人综合久久久| 久久婷婷五月综合成人D啪| 久久综合久久自在自线精品自| 欧美国产日韩综合在线| 欧美偷窥清纯综合图区| 亚洲精品第一国产综合境外资源| 琪琪五月天综合婷婷| 97久久久精品综合88久久| 成人综合久久精品色婷婷| 婷婷亚洲综合五月天小说| 精品久久久久久综合日本| 丁香五月网久久综合| 欧美伊香蕉久久综合类网站| 亚洲综合色视频在线观看| 色天使久久综合网天天| 99久久国产综合精品女同图片| 国产亚洲精品精品国产亚洲综合| 国产综合亚洲专区在线| 久久天天日天天操综合伊人av| 亚洲综合色成在线播放| 天天综合久久一二三区|