大數(shù)據(jù)platformhadoopHadoop是一個(gè)適合大數(shù)據(jù)的分布式存儲(chǔ)和處理平臺(tái)，是一個(gè)開源的框架。1.搜索引擎(Hadoop的初衷是快速建立大規(guī)模網(wǎng)頁(yè)的索引)，目前企業(yè)提供的大數(shù)據(jù)解決方案，大部分是基于企業(yè)提供的大數(shù)據(jù)解決方案，大部分是基于Hadoop開源項(xiàng)目。

[簡(jiǎn)介] 數(shù)據(jù)平臺(tái)其實(shí)是存在于企業(yè)發(fā)展過程中的。在數(shù)據(jù)爆炸式增長(zhǎng)的時(shí)代，傳統(tǒng)的企業(yè)級(jí)數(shù)據(jù)庫(kù)，就企業(yè)本身而言，需求更符合數(shù)據(jù)平臺(tái)建設(shè)方案的需求，那么工程師對(duì)數(shù)據(jù)平臺(tái)建設(shè)有哪些規(guī)劃？讓我們仔細(xì)看看。1.敏捷數(shù)據(jù)bazaar數(shù)據(jù)bazaar也是常見的方案。底層數(shù)據(jù) product綁定到分析層，這樣應(yīng)用層可以直接分析底層數(shù)據(jù) product。

2.General數(shù)據(jù)Warehouse數(shù)據(jù)Warehouse的重點(diǎn)是整合數(shù)據(jù)也是梳理業(yè)務(wù)邏輯。數(shù)據(jù)雖然倉(cāng)庫(kù)也可以像SAAS一樣封裝成立方體來提高數(shù)據(jù)的讀取性能，但是數(shù)據(jù)倉(cāng)庫(kù)的作用更多的是解決公司的業(yè)務(wù)問題。3.Hadoop分布式系統(tǒng)架構(gòu)當(dāng)然，對(duì)于大型分布式系統(tǒng)架構(gòu)，Hadoop仍然站在不可替代的關(guān)鍵位置。雅虎、臉書、百度、淘寶等國(guó)內(nèi)外大型企業(yè)最初都是基于Hadoop的。

企業(yè)提供的大部分?jǐn)?shù)據(jù)解決方案都是基于Hadoop開源項(xiàng)目。Hadoop是由Apache基金會(huì)開發(fā)的分布式系統(tǒng)基礎(chǔ)設(shè)施。用戶可以開發(fā)分布式程序，而無需了解發(fā)行版的底層細(xì)節(jié)。充分利用集群的力量進(jìn)行高速操作和存儲(chǔ)。Hadoop實(shí)現(xiàn)了一個(gè)分布式文件系統(tǒng)，其中一個(gè)是HDFS(HadoopDistributed)。

HDFS放寬)POSIX要求，并可以在文件系統(tǒng)中流式訪問數(shù)據(jù)Hadoop框架的核心設(shè)計(jì)是:HDFS和MapReduce。HDFS為massive 數(shù)據(jù)提供存儲(chǔ)，MapReduce為massive 數(shù)據(jù)提供計(jì)算。Hadoop高可靠性的優(yōu)點(diǎn):Hadoop逐位存儲(chǔ)和處理數(shù)據(jù)的能力值得信賴。

Da 數(shù)據(jù)近年來越來越受歡迎。當(dāng)人們提到Da 數(shù)據(jù)，就會(huì)遇到很多相關(guān)的概念問題，比如云計(jì)算、Hadoop等。那么，什么是Big 數(shù)據(jù)，什么是Hadoop，Big 數(shù)據(jù)和Hadoop有什么關(guān)系呢？Da 數(shù)據(jù)的概念早在1980年由著名未來學(xué)家阿爾文·托夫勒提出。2009年，美國(guó)互聯(lián)網(wǎng)數(shù)據(jù) Center確認(rèn)了偉大數(shù)據(jù)時(shí)代的來臨。隨著Google MapReduce和Google(GFS)的發(fā)布，large 數(shù)據(jù)不再只是用來描述大量的數(shù)據(jù)，還涵蓋了數(shù)據(jù)的處理速度。