在測(cè)量和測(cè)試計(jì)算機(jī)應(yīng)用程序時(shí)，科學(xué)家和工程師每天都會(huì)收集大量數(shù)據(jù)。例如，世界上最大的粒子固定器對(duì)撞機(jī)稱為大型強(qiáng)子對(duì)撞機(jī)，每秒產(chǎn)生約40兆兆字節(jié)的數(shù)據(jù)。波音的噴氣引擎每30分鐘產(chǎn)生大約10tb的數(shù)據(jù)。當(dāng)一架大型噴氣式飛機(jī)飛越大西洋時(shí)，飛機(jī)上的四個(gè)引擎可以產(chǎn)生大約640萬億字節(jié)的數(shù)據(jù)。如果把這個(gè)數(shù)據(jù)乘以平均每天2500個(gè)航班，每天產(chǎn)生的數(shù)據(jù)量是驚人的；這就叫大數(shù)據(jù)。

大數(shù)據(jù)帶來了新的數(shù)據(jù)處理方式。例如，深入的數(shù)據(jù)分析工具、數(shù)據(jù)集成工具、搜索工具、報(bào)告工具和維護(hù)工具有助于處理大數(shù)據(jù)以從中獲得價(jià)值。國(guó)際數(shù)據(jù)公司(IDC)分析了音樂、視頻文件和其他數(shù)據(jù)文件。研究表明，系統(tǒng)生成的數(shù)據(jù)量每年翻一番。這是摩爾定律的一般概念。摩爾定律是如何變化的？說到微處理器的強(qiáng)大，你可能會(huì)體驗(yàn)到摩爾定律的最后寬度。

眾所周知，人們?cè)谫I房時(shí)會(huì)避免噪音。有人覺得住高了噪音低，但樓層越高噪音越大。那么哪一層樓最吵呢？有沒有具體的數(shù)據(jù)來解釋？站得更高，看得更遠(yuǎn)，現(xiàn)在很多市民傾向于買樓層高的房子，但搬進(jìn)去后發(fā)現(xiàn)“越住越高，感覺越吵。”本文在城市中選取高架橋側(cè)的幾棟高層建筑，進(jìn)行了現(xiàn)場(chǎng)噪聲測(cè)試。研究發(fā)現(xiàn)，高層建筑的噪聲隨著樓層的升高而增大，汽車?yán)嚷暫托旭傊械拇笮蛙囕v是主要噪聲源，夜間道路噪聲干擾最大。

考試時(shí)間是早上交通高峰期。記者看到，立交橋上車流不斷(一分鐘約有10輛車通過)，交通順暢但速度不快。因?yàn)榍胺铰房谟屑t綠燈，有大型車輛不時(shí)鳴笛、剎車、啟動(dòng)站在高樓的窗前。大樓周圍沒有多少綠色植物。通過手持噪聲測(cè)量?jī)x發(fā)現(xiàn)，測(cè)量數(shù)據(jù)中最高的21樓的噪聲量為79.4分貝(平均值)，而1樓的噪聲量為67.7分貝，相差11.7分貝。

大數(shù)據(jù)入門的方法是從零開始。大數(shù)據(jù)技術(shù)是指大數(shù)據(jù)的應(yīng)用技術(shù)，涵蓋大數(shù)據(jù)平臺(tái)、大數(shù)據(jù)指標(biāo)體系等各類大數(shù)據(jù)應(yīng)用。大數(shù)據(jù)是指在一定時(shí)間內(nèi)，常規(guī)軟件工具無法捕捉、管理和處理的數(shù)據(jù)集合。它是一種海量、高增長(zhǎng)、多元化的信息資產(chǎn)，需要新的處理模式來擁有更強(qiáng)的決策力、洞察力和發(fā)現(xiàn)力以及流程優(yōu)化能力。大數(shù)據(jù)技術(shù)一來可以處理相對(duì)大量的數(shù)據(jù)，二來可以處理不同類型的數(shù)據(jù)。

所以一定要從零開始，學(xué)習(xí)更多的專業(yè)知識(shí)，才能幫助自己掌握關(guān)于大數(shù)據(jù)的知識(shí)。大數(shù)據(jù)大數(shù)據(jù)的結(jié)構(gòu)包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，非結(jié)構(gòu)化數(shù)據(jù)日益成為數(shù)據(jù)的主體部分。調(diào)查報(bào)告顯示，企業(yè)中80%的數(shù)據(jù)是非結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)每年以60%的指數(shù)級(jí)增長(zhǎng)。大數(shù)據(jù)只是互聯(lián)網(wǎng)發(fā)展到現(xiàn)階段的一種表征或特征。沒有必要將其神話或保持敬畏。

有人說擁有數(shù)據(jù)就像擁有全世界。數(shù)據(jù)帶來的東西遠(yuǎn)遠(yuǎn)超出人類的想象。隨著時(shí)代的發(fā)現(xiàn)，大數(shù)據(jù)的新興發(fā)展給世界帶來無限可能。對(duì)于大數(shù)據(jù)來說，數(shù)據(jù)的內(nèi)容是巨大的。對(duì)于大數(shù)據(jù)，沒有明確的大小規(guī)定。大數(shù)據(jù)量和大數(shù)據(jù)是兩個(gè)完全不同的概念。如果數(shù)據(jù)只有大，就不能稱之為大數(shù)據(jù)。大數(shù)據(jù)應(yīng)該說是大計(jì)算加數(shù)據(jù)量。單從數(shù)據(jù)量來看，當(dāng)數(shù)據(jù)單位達(dá)到PB、TB等時(shí)。，這些數(shù)據(jù)將被稱為大數(shù)據(jù)。

有人說，把1PB的數(shù)據(jù)寫到磁盤需要200多天，全人類的總資產(chǎn)加起來還不到1P，TB單位的數(shù)據(jù)相當(dāng)于全世界海灘上所有的沙子，大小永遠(yuǎn)是相對(duì)的。更多的是利用數(shù)據(jù)去發(fā)現(xiàn)數(shù)據(jù)背后的價(jià)值，這將是經(jīng)過仔細(xì)分析后開發(fā)出來的。尺度也是用不同的維度來衡量的，從時(shí)間序列上積累了大量的數(shù)據(jù)，深度上更詳細(xì)的數(shù)據(jù)。

大數(shù)據(jù)的類型大致可以分為三類:傳統(tǒng)企業(yè)數(shù)據(jù)(Traditionalenterprisedata):包括CRMsystems的客戶數(shù)據(jù)、傳統(tǒng)ERP數(shù)據(jù)、庫(kù)存數(shù)據(jù)、賬戶數(shù)據(jù)。Machinegenerated/sensordata:包括CallDetailRecords、智能電表、工業(yè)設(shè)備傳感器、設(shè)備日志(通常是Digitalexhaust)、交易數(shù)據(jù)等。