Hadoop環境搭建 Hadoop集群搭建、Hadoop新特性
可掌握的核心能力:
能夠理解Shell命令選項;
能夠理解NameNode與DataNode;
能夠實現Shell定時采集數據至HDFS;
能夠理解MapReduce處理流程解析;
能夠熟練使用Flume;
掌握數據倉庫的基本使用;
能夠熟練使用Hive;
能夠實現數據采集搜集和數據預處理;
熟練Azkaban的使用;
掌握維度建模的三種方式;
掌握網站流量的統計分析;
掌握Hadoop3的新特性。
可解決的現實問題:
掌握大數據轉型必備技能,為需要轉型的JavaEE工程師提供新的轉型基礎。
HDFS HDFS基本原理、HDFS應用開發
MapReduce&Flume MapReduce核心機制、MapReduce深入、Flume
數據管理與數據倉庫
數據管理、數據倉庫、數據倉庫
網站日志分析系統
數據采集搜集、數據預處理、Azkaban、維度建模、Sqoop
|