課程介紹

Hadoop框架主要用來解決海量數據的存儲和分析計算問題。是大數據開發工程師所需技術之一。
課程特點：
1、全程案例貫穿始終，幾乎每個知識點都有配套的案例；
2、整個框架深入源碼講解；
3、優化措施來源于企業開發；
本課程中你將學習到，Hadoop完全分布式集群搭建、Hadoop源碼編譯、HDFS的Shell操作、HDFS的API操作、HDFS的IO流操作、HDFS讀寫數據流程、NameNode和SecondaryNameNode工作機制、DataNode工作機制、集群節點動態服役和退役、HDFS2.x新特性、MapReduce編程規范、自定義序列化、自定義InputFormat、自定義OutputFormat、分區、排序、合并、分組、ReduceJoin、MapJoin、數據清洗、計數器、TopN案例、倒排索引案例、MapTask工作機制、ReduceTask工作機制、Shuffle工作機制、MapReduce工作流程、Job提交流程源碼、MapReduce源碼、數據壓縮、Yarn工作機制、作業提交流程、YARN資源調度器、MapReduce企業優化、HDFS小文件企業優化、數據傾斜優化等。