什么是大數(shù)據(jù)？在很多人眼里，大數(shù)據(jù)可能是一個很模糊的概念，但是在日常生活中，大數(shù)據(jù)離我們很近，我們不再時時刻刻享受著大數(shù)據(jù)帶來的便利、個性化和人性化。要全面理解大數(shù)據(jù)，應(yīng)該簡單地從四個方面來理解。定義，結(jié)構(gòu)特征，我們身邊有什么大數(shù)據(jù)，大數(shù)據(jù)帶來了什么，這四個方面都懂了。那么到底什么是“大數(shù)據(jù)”呢？麥肯錫全球研究所給出的定義中指出，大數(shù)據(jù)是一種數(shù)據(jù)集合，其規(guī)模之大，大大超過了傳統(tǒng)數(shù)據(jù)庫軟件工具在獲取、存儲、管理和分析方面的能力。

大數(shù)據(jù)的單位一般以PB來衡量。那么PB有多大呢？1GB1024MB，1PB1024GB足以稱得上大數(shù)據(jù)。如圖:計量單位列表其次，大數(shù)據(jù)的特點和結(jié)構(gòu)是什么？大數(shù)據(jù)整體分為四個特征。第一，數(shù)量大。計量單位是PB級，存儲內(nèi)容很多。第二，高速。大數(shù)據(jù)在獲取速度和分析速度上需要及時快速。保證短時間內(nèi)有更多的人收到信息。

大數(shù)據(jù)發(fā)展涉及的關(guān)鍵技術(shù):大數(shù)據(jù)獲取技術(shù)是指通過RFID數(shù)據(jù)、傳感器數(shù)據(jù)、社交網(wǎng)絡(luò)交互數(shù)據(jù)、移動互聯(lián)網(wǎng)數(shù)據(jù)等獲取各種類型的結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化的海量數(shù)據(jù)。大數(shù)據(jù)預(yù)處理技術(shù)大數(shù)據(jù)預(yù)處理技術(shù)主要是指對接收到的數(shù)據(jù)進(jìn)行分析、提取、清洗、填充、平滑、合并、歸一化、檢查一致性等操作。大數(shù)據(jù)存儲與管理技術(shù)大數(shù)據(jù)存儲與管理的主要目的是將采集到的數(shù)據(jù)用內(nèi)存存儲起來，建立相應(yīng)的數(shù)據(jù)庫，進(jìn)行管理和調(diào)用。

批處理是先存儲后處理，流處理是直接處理。大數(shù)據(jù)分析與挖掘技術(shù)大數(shù)據(jù)處理的核心是分析大數(shù)據(jù)，只有通過分析才能獲得大量智能的、深入的、有價值的信息。大數(shù)據(jù)展示技術(shù)大數(shù)據(jù)時代，數(shù)據(jù)像井噴一樣增長。分析師對這些龐大的數(shù)據(jù)進(jìn)行匯總分析，如果分析出來的結(jié)果是密密麻麻的文字，很少有人能看懂，所以我們需要將數(shù)據(jù)可視化。

簡單來說，可以分為三類:1)結(jié)構(gòu)化數(shù)據(jù)通常是指記錄在關(guān)系數(shù)據(jù)庫中的數(shù)據(jù)，存儲在表和字段中，字段之間相互獨立。2)半結(jié)構(gòu)化數(shù)據(jù)是指以自描述文本形式記錄的數(shù)據(jù)。由于自描述數(shù)據(jù)不需要滿足關(guān)系數(shù)據(jù)庫中非常嚴(yán)格的結(jié)構(gòu)和關(guān)系，所以使用起來非常方便。許多網(wǎng)站和應(yīng)用程序訪問日志都使用這種格式，網(wǎng)頁本身也是如此。3)非結(jié)構(gòu)化數(shù)據(jù)通常指語音、圖片、視頻等格式的數(shù)據(jù)。

體積:數(shù)據(jù)量巨大。大容量是大數(shù)據(jù)區(qū)別于傳統(tǒng)數(shù)據(jù)的最顯著特征。一般關(guān)系數(shù)據(jù)庫處理的數(shù)據(jù)量在TB級別，大數(shù)據(jù)處理的數(shù)據(jù)量通常在PB級別以上。多樣性:有許多數(shù)據(jù)類型。大數(shù)據(jù)處理的計算機數(shù)據(jù)類型不再是單一的文本形式或者結(jié)構(gòu)化數(shù)據(jù)庫中的表格。它包括訂單、日志、博客、微博、音頻、視頻等復(fù)雜數(shù)據(jù)。速度:數(shù)據(jù)快速流動。

首先我來解釋一下“大數(shù)據(jù)”這個詞的含義和誕生。最早提出大數(shù)據(jù)時代的是全球知名咨詢公司麥肯錫。大數(shù)據(jù)在物理、生物、環(huán)境生態(tài)以及軍事、金融、通信等行業(yè)領(lǐng)域已經(jīng)存在了一段時間，但卻是因為近年來互聯(lián)網(wǎng)和信息產(chǎn)業(yè)的發(fā)展才引起人們的關(guān)注。大數(shù)據(jù)是繼云計算、互聯(lián)網(wǎng)之后，IT行業(yè)又一次顛覆性的技術(shù)革命。云計算主要是為數(shù)據(jù)資產(chǎn)提供保存和訪問的場所和渠道，數(shù)據(jù)才是真正有價值的資產(chǎn)。

大數(shù)據(jù)時代的到來，為政府治理理念的轉(zhuǎn)變帶來了新的機遇。對于政府來說，要提高治理能力，就要融入新思維、新文化，在這方面，大數(shù)據(jù)中的數(shù)據(jù)思維和文化模式可以為政府治理的轉(zhuǎn)型提供思路。如果充分利用大數(shù)據(jù)，政府治理可以實現(xiàn)多層次、多元化、多角度的發(fā)展，最終達(dá)到政府管理以公共服務(wù)為主、協(xié)同治理為輔的目標(biāo)。