術語匯編 Hadoop簡介
本節向大家描述一下Hadoop簡介，主要包括Hadoop概念和Hadoop子系統功能等內容，希望通過本節的介紹大家對Hadoop有新的認識，讓我們一起來學習Hadoop吧。
Hadoop簡介
Hadoop是一個分布式系統基礎架構，由Apache基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序。充分利用集群的威力高速運算和存儲。
簡單地說來，Hadoop是一個可以更容易開發和運行處理大規模數據的軟件平臺。
Hadoop實現了一個分布式文件系統（HadoopDistributedFileSystem），簡稱HDFS。HDFS有著高容錯性（fault-tolerent）的特點，并且設計用來部署在低廉的（low-cost）硬件上。而且它提供高傳輸率（highthroughput）來訪問應用程序的數據，適合那些有著超大數據集（largedataset）的應用程序。HDFS放寬了（relax）POSIX的要求（requirements）這樣可以流的形式訪問（streamingaccess）文件系統中的數據。
Hadoop是一個分布式計算基礎設施，它包含一系列相關的子項目，這些項目都隸屬于Apache軟件基金會（ASF）。ASF為這些開源社區項目提供支持。Hadoop里***的是MapReduce和分布式文件系統（HDFS），其他的子系統提供了一些附加功能，或者在core上增加了一些高級的抽象。下面Hadoop簡介向你介紹一下Hadoop子系統的一些附加功能。
Core
分布式系統和通用IO組件和接口（序列化，Java遠程過程調用等等）。
Avro
支持跨語言過程調用，持久數據存儲的數據序列化系統。
MapReduce
構建在廉價的PC機器上的分布式數據處理模型和運行環境。
HDFS
Hadoop簡介中的HDFS構建在廉價的PC機器上的分布式文件系統。
Pig
處理海量數據集的數據流語言和運行環境。pig運行在HDFS和MapReduce之上。
HBase
分布式，面向列的數據庫。HBase使用HDFS作為底層存儲，同時使用MapReduce支持批處理模式的計算和隨機查詢。
ZooKeeper
提供分布式、高效的協作服務。ZooKeeper提供分布式鎖這樣的原子操作，可以用來構建分布式應用。
Hive
分布式數據倉庫，Hive使用HDFS存儲數據，提供類似SQL的語言（轉換為MapReduce任務）查詢數據。
Chukwa
分布式數據采集和分析系統。使用HDFS存儲數據，使用Mapreduce輸出分析報告。本節關于Hadoop簡介講解完畢。
【編輯推薦】
