數(shù)據(jù)量大的時代，數(shù)據(jù)更多。數(shù)據(jù)-0數(shù)據(jù)-0/時代存儲形式大，移動互聯(lián)網(wǎng)、社交網(wǎng)絡(luò)、數(shù)據(jù)分析、云服務(wù)等應(yīng)用的快速普及，到大數(shù)據(jù)都包括哪些內(nèi)容？應(yīng)該如何描述Da 數(shù)據(jù)的技術(shù)生態(tài)？什么是大數(shù)據(jù)時代。

區(qū)塊鏈，2019年最美的詞，閃耀在科技領(lǐng)域，閃耀在星光熠熠的實(shí)體產(chǎn)業(yè)。2019年的1024演講讓區(qū)塊鏈這個詞有了新的面貌。在過去，它總是與傳銷和欺詐聯(lián)系在一起，“區(qū)塊鏈”這個詞總是蒙上一層灰色。但現(xiàn)在，區(qū)塊鏈與實(shí)體經(jīng)濟(jì)的融合緊密相連，已經(jīng)成為國家戰(zhàn)略技術(shù)。這個詞立刻閃耀著熱情的紅色和商業(yè)的綠色。“工業(yè)區(qū)塊鏈”就是在這樣的時代背景下應(yīng)運(yùn)而生的。是繼“互聯(lián)網(wǎng)”之后的又一個熱詞。核心是區(qū)塊鏈必須和實(shí)體產(chǎn)業(yè)融合，讓區(qū)塊鏈科技找到更多的商業(yè)場景才是正道。

作為一個區(qū)塊鏈從業(yè)者，今天我就來說說區(qū)塊鏈的分布式存儲和生態(tài)大數(shù)據(jù)結(jié)合后碰撞出的火花?，F(xiàn)在的存儲大部分是集中式存儲，存儲在傳統(tǒng)的集中式服務(wù)器中。如果服務(wù)器宕機(jī)或出現(xiàn)故障，或者服務(wù)器停止運(yùn)行，許多數(shù)據(jù)將會丟失。比如我們在微信朋友圈發(fā)布的圖片，在Tik Tok上傳的視頻，都是集中存儲的。很多朋友會在網(wǎng)上存東西，但是有一天打開，網(wǎng)頁會呈現(xiàn)404，說明存的東西不見了。

主要有幾個發(fā)展趨勢:一是流式架構(gòu)的替代。最早的數(shù)據(jù) ecology沒有辦法統(tǒng)一批處理和流計算，而是采用了Lambda架構(gòu)。批處理任務(wù)使用批處理計算引擎，而流任務(wù)使用流計算引擎，如MapReduce用于批處理，Storm用于流計算。后來Spark試圖從批處理的角度統(tǒng)一流程處理和批處理。近年來，純流架構(gòu)的Flink異軍突起。由于其合理的建筑設(shè)計和生態(tài)健康，近年來發(fā)展尤為迅速。

Da 數(shù)據(jù)代表數(shù)據(jù)從量到質(zhì)的變化過程，代表數(shù)據(jù)作為一種資源，在經(jīng)濟(jì)社會實(shí)踐中發(fā)揮著越來越重要的作用，相關(guān)的技術(shù)、產(chǎn)業(yè)、應(yīng)用、政策等環(huán)境都會與之相互作用。從技術(shù)的角度來看，-0/的這種質(zhì)變帶來了新的問題，即-0由靜態(tài)變?yōu)閯討B(tài)，由簡單的多維變?yōu)榫蘧S，其類型日益豐富，超出了目前分析方法和技術(shù)所能處理的范圍。這些數(shù)據(jù)的采集、分析、處理、存儲和呈現(xiàn)都涉及復(fù)雜的多模態(tài)和高維計算過程，涉及異構(gòu)介質(zhì)的統(tǒng)一語義描述，涉及數(shù)據(jù)模型的構(gòu)建和海量存儲，涉及多維數(shù)據(jù)的特征關(guān)聯(lián)和仿真呈現(xiàn)。

Da 數(shù)據(jù)，特點(diǎn)之一:隨著信息技術(shù)的飛速發(fā)展，數(shù)據(jù)開始爆發(fā)式增長。數(shù)據(jù) in 數(shù)據(jù)不再以幾個GB或TB為單位，而是以Pb(1000t)、EB(100萬t)或ZB(10億t)為單位。Da 數(shù)據(jù)的第二個特點(diǎn):多樣性主要體現(xiàn)在三個方面:數(shù)據(jù)多種來源、數(shù)據(jù)多種類型和數(shù)據(jù)強(qiáng)相關(guān)性。

Da 數(shù)據(jù)是指數(shù)據(jù)的集合，其內(nèi)容在一定時期內(nèi)無法被常規(guī)軟件工具捕獲、管理和處理。大數(shù)據(jù)技術(shù)是指從各類數(shù)據(jù)中快速獲取有價值信息的能力?！按髷?shù)據(jù)”(-0/)研究機(jī)構(gòu)Gartner給出了這樣的定義?！癉a 數(shù)據(jù)”是一種海量、高增長、多元化的信息資產(chǎn)，需要新的處理模式，才能擁有更強(qiáng)的決策力、洞察力和發(fā)現(xiàn)力以及流程優(yōu)化能力。