? ? ? ?Spark2.0快速入門課程的目的是讓大數(shù)據(jù)初學者快速入門,目標是讓想學大數(shù)據(jù)的人了解這個大數(shù)據(jù)生態(tài)圈,以及Spark在大數(shù)據(jù)生態(tài)圈中的霸主地位。
? ? ? 該課程為Spark的基礎課程。
? ? ? ?1.會講解到Spark學習環(huán)境的搭建
? ? ? ?2.最基礎的Linux命令的使用
? ? ? ?3.Hadoop中分布式文件系統(tǒng)HDFS的使用
? ? ? ?4.Spark中的基本概念及抽象
? ? ? ?5.Spark程序編寫的注意事項
? ? ? ?6.Spark性能優(yōu)化的方向
? ? ? ?7.以及會講解一些Spark內(nèi)核和內(nèi)核使用的Scala語言的知識。
? ? ? ?8.最后以一個成都地區(qū)20160101到20161231一年PM2.5數(shù)據(jù)的監(jiān)控數(shù)據(jù)作為實戰(zhàn)項目的數(shù)據(jù)素材,以此講解Spark2.0初階的項目實戰(zhàn)并以此作為基礎課程的結束。
? ? ? ?為深入學習SparkSql、Spark流處理、Spark圖計算、Spark機器學習打下基礎。