Oracle高級編程 用戶權限及安全管理;數據備份、恢復、移植;觸發(fā)器;存儲過程 可掌握的核心技能:
1、掌握Oracle、NoSQL數據庫開發(fā)技術;
2、熟悉Linux系統(tǒng),具備Shell、Python腳本開發(fā)能力;
3、熟悉hadoop工作原理,具備Mapreduce、Hive、Hbase開發(fā)能力,以及性能調優(yōu)的能力;
可解決的現實問題:
1、能夠完成Hadoop大數據生態(tài)系統(tǒng)下大數據搜集、處理、存儲、分析、計算、應用開發(fā)。
2、具備良好的自我管理能力和團隊協(xié)作能力。
可勝任的工作崗位:
● 高級Java開發(fā)工程師
● Hadoop開發(fā)工程師
GitHub 隨著越來越多的應用程序轉移到了云上,Github作為開源代碼庫以及版本控制系統(tǒng),已經成為管理軟件開發(fā)以及發(fā)現已有代碼的首選方法。
Maven項目對象模型(POM) 可以通過一小段描述信息來管理項目的構建、報告和文檔的軟件項目管理工具
Linux開發(fā)環(huán)境 linux 系統(tǒng)安裝,卸載;用戶管理;文件管理;應用程序管理;
Hadoop 管理與開發(fā) Hadoop集群搭建;
Hadoop HDFS分布式文件系統(tǒng):HDFS的概念、HDFS的API的應用、數據塊Block、NameNode的文檔目錄樹、NameNode與dataNode的關聯;
MapReducer 框架:Shuffle機制、FileOutPutFormat、FileInPutFormat、MapReducer的通信機制、利用Yarn的資源管理和資源調度機制;
Hive數據倉庫開發(fā) Hive基本SQL操作;Hive的導入導出;Hive中文件的存儲類型;Hive的內嵌函數;Hive的權限管理;Hive集群配置與管理;
NoSQL數據庫Hbase開發(fā) 搭建NoSQL數據庫HBase的集群;Zookeeper的選舉算法、同步機制、Zookeeper集群的搭建;Kafka高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)集群環(huán)境的搭建;
阿里云 Clouder大數據認證項目:共享單車騎行分析 本認證項目講解了共享單車的相關知識、大數據應用場景,常用數據分析方法、算法、以及數據可視化,最后通過一個實驗帶領學員使用數據分析方法,解決了共享單車調度場景及企業(yè)關注的核心指標的分析需求。學員可參考本實驗,結合企業(yè)自身業(yè)務和需求,將所學應用到實踐中去。
本項目由阿里云提供項目資源,思誠教研團隊提供項目開發(fā)指導,學員通過學習與考試,可獲得阿里云 Clouder大數據專項技能認證證書。
阿里云 Clouder大數據認證項目:電影評價數據的采集與分析 電影評價網站記錄著觀影者對電影的喜好程度和評價信息,通過對相關網站用戶評價信息的收集,可以為電影相關的數據的分析和挖掘做支撐,常見的后期應用包括:對電影針對的用戶群體做分析、獲得大眾娛樂/輿情熱點、電影推薦(廣告推送)等。該場景也可推廣至其他行業(yè)評價數據的應用。
|