廣州Hadoop大數據開發技術入門

課程目的：

本課程從基礎的環境搭建到更深入的知識學習都會有一個比較好的講解。

站在想入門Hadoop開發的初學者立場和視角，從零開始學習Hadoop生態圈知識，詳細介紹各個不同組件的安裝、使用等情況，從基本的環境搭建開始，講解Hadoop生態圈知識。學習完本課程后，學員對Hadoop生態圈有一定的了解，并且對Hadoop的基本開發有一個了解。

課程優勢：

Hadoop是Apache軟件基金會旗下的一個開源分布式計算平臺。以Hadoop分布式文件系統(Hadoop Distributed File System,HDFS)和(Google MapReduce的開源實現)為核心的；

Hadoop為用戶提供了系統底層細節透明的分布式基礎架構。HDFS的高容錯性、高伸縮性等優點允許用戶將Hadoop部署在低廉（low-cost）的硬件上，形成分布式系統；

MapReduce分布式編程模型允許用戶在不了解分布式系統底層細節的情況下并發并行應用程序。所以用戶可以利用集群的Hadoop輕松地組織計算機資源，從而搭建自己的分布式計算平臺，并且可以充分利用集群的計算和存儲能力，完成海量數據的處理。

Hadoop是一個開源框架，可編寫和運行分布式應用處理大規模數據。

分布式計算是一個寬泛并且不斷變化的領域。

1) 方便：Hadoop運行在由一般商用機器構成的大型集群上，或者云計算服務上，比如EC2。

2) 健壯：Hadoop致力于在一般商用硬件上運行，其架構假設硬件會頻繁失效，Hadoop可以從容地處理大多數此類故障。

3) 可擴展：Hadoop通過增加集群節點，可以線性地擴展以處理更大的數據集。

4) 簡單：Hadoop允許用戶快速編寫高效的并行代碼。

Hadoop框架的核心是HDFS和MapReduce。其中HDFS是分布式文件系統，MapReduce是分布式數據處理模型和執行環境。掌握了這兩部分，也就掌握了Hadoop核心的東西。