可支持super大規(guī)模數(shù)據(jù)存儲(chǔ)，數(shù)據(jù)存儲(chǔ)組織方式因媒體而異。HDFS介紹:我們?cè)鯓硬拍艽鎯?chǔ) -1 數(shù)據(jù)大數(shù)據(jù)技術(shù)主要是解決大規(guī)模-2，數(shù)據(jù) 存儲(chǔ)哪幾種在線存儲(chǔ):這種存儲(chǔ)模式提供了最好的數(shù)據(jù)訪問便利性，大型磁盤陣列是最典型的一種。

oversize 數(shù)據(jù)使用NoSQL數(shù)據(jù)library存儲(chǔ)?？梢灾С謘uper大規(guī)模-2存儲(chǔ)，靈活的數(shù)據(jù)模型可以很好的支持Web2.0應(yīng)用。具有較強(qiáng)的橫向擴(kuò)展能力等。而且cloud 數(shù)據(jù) library具有高可擴(kuò)展性、高可用性、多租戶、有效分配資源的特點(diǎn)。Cloud 數(shù)據(jù) library是基于云計(jì)算技術(shù)發(fā)展的一種共享基礎(chǔ)設(shè)施的方法，是在云計(jì)算環(huán)境下部署和虛擬化的數(shù)據(jù) library。

如今，隨著IT和互聯(lián)網(wǎng)信息技術(shù)的飛速發(fā)展和進(jìn)步。目前數(shù)據(jù)這個(gè)行業(yè)越來越火爆，導(dǎo)致國(guó)內(nèi)人才極度短缺。以下IT培訓(xùn)介紹-2存儲(chǔ)在Hadoop環(huán)境下的管理技巧。1.分布式存儲(chǔ)傳統(tǒng)集中式存儲(chǔ)已經(jīng)存在一段時(shí)間了。但是big 數(shù)據(jù)并不真正適合集中式存儲(chǔ)架構(gòu)。Hadoop旨在讓計(jì)算更接近數(shù)據(jù) node，同時(shí)采用了HDFS文件系統(tǒng)大規(guī)模的橫向擴(kuò)展功能。

但也造成了自身性能和規(guī)模的瓶頸?，F(xiàn)在如果通過集中式的SAN處理器處理所有數(shù)據(jù)，與Hadoop的分布式、并行特性相悖。您可以為不同的數(shù)據(jù)節(jié)點(diǎn)管理多個(gè)SAN，也可以將所有數(shù)據(jù)節(jié)點(diǎn)集中在一個(gè)SAN中。但是Hadoop是一個(gè)分布式應(yīng)用，所以要在分布式存儲(chǔ)上運(yùn)行，所以存儲(chǔ)保留了和Hadoop本身一樣的靈活性，但是也需要擁抱一個(gè)軟件定義存儲(chǔ) scheme，在商業(yè)服務(wù)器上運(yùn)行，自然比瓶頸Hadoop更高效。

Da 數(shù)據(jù)技術(shù)主要是解決大規(guī)模 數(shù)據(jù)的計(jì)算和處理問題，但如果要計(jì)算數(shù)據(jù)，首先要解決的其實(shí)是。如果文件的大小超過了磁盤的大小，你該怎么辦存儲(chǔ)？單機(jī)時(shí)代，主要解決方案是RAID；在分布式時(shí)代，主要的解決方案是分布式文件系統(tǒng)。其實(shí)無論是在RAID還是分布式文件系統(tǒng)中，大規(guī)模數(shù)據(jù)存儲(chǔ)都需要解決幾個(gè)核心問題。這些問題是什么？