Hadoop分析

基本介紹

• 中文名：Hadoop分析

什麼是Hadoop分析？

Hadoop是一種用於業務分析處理的環境。允許大量的計算算來處理超大型非結構化數據集。這些數據可以來自於各種源，但是最常見的數據是通過作為物聯網的一部分的感測器創造的數據。為了讓其分析處理是有價值的，Hadoop必須快速處理這些數據集，而且要通過Hadoop分散式檔案系統（HDFS）實現。HDFS本質上將計算轉移到數據，而不是傳輸數據到計算。

大多數Hadoop環境由商用伺服器集群組成，都有本地存儲。數據載入到這些結點，在那裡處理那個數據集。這稱之為MapReduce功能。一旦每一個結點基於請求處理那個數據，結果就會從每一個結點傳送，然後在一個主結點合併。主結點也存儲與集群管理相關的所有元數據。