觀察中國(guó)大數(shù)據(jù)行業(yè)和企業(yè)的問(wèn)題。大數(shù)據(jù)作為一個(gè)新興行業(yè)，一直處于輿論的風(fēng)口浪尖，中國(guó)發(fā)展大數(shù)據(jù)需要三個(gè)條件，大數(shù)據(jù)的經(jīng)濟(jì)價(jià)值已經(jīng)被人們所認(rèn)識(shí)，大數(shù)據(jù)的技術(shù)也逐漸成熟，一旦完成數(shù)據(jù)的整合和監(jiān)管，大數(shù)據(jù)爆炸時(shí)代就要到來(lái)。中國(guó)大數(shù)據(jù)產(chǎn)業(yè)有什么特點(diǎn)。

趨勢(shì)一:數(shù)據(jù)的資源化利用什么是數(shù)據(jù)的資源化利用？意味著大數(shù)據(jù)已經(jīng)成為企業(yè)和社會(huì)關(guān)注的重大資源，成為大家爭(zhēng)奪的焦點(diǎn)。因此，企業(yè)必須提前做好大數(shù)據(jù)營(yíng)銷戰(zhàn)略規(guī)劃，搶占市場(chǎng)先機(jī)。趨勢(shì)二:與云計(jì)算深度融合大數(shù)據(jù)離不開云處理，云處理可以為大數(shù)據(jù)提供靈活、可擴(kuò)展的基礎(chǔ)設(shè)施，是產(chǎn)生大數(shù)據(jù)的平臺(tái)之一。從2013年開始，大數(shù)據(jù)技術(shù)與云計(jì)算技術(shù)緊密結(jié)合，預(yù)計(jì)未來(lái)兩者的關(guān)系會(huì)更加緊密。

趨勢(shì)三:數(shù)據(jù)科學(xué)和數(shù)據(jù)聯(lián)盟的建立未來(lái)，數(shù)據(jù)科學(xué)將成為一門專門的學(xué)科，被越來(lái)越多的人所認(rèn)可。各大高校會(huì)開設(shè)專門的數(shù)據(jù)科學(xué)專業(yè)，也會(huì)催生一批與之相關(guān)的新工作。同時(shí)，基于數(shù)據(jù)的基礎(chǔ)平臺(tái)，還將建立跨領(lǐng)域的數(shù)據(jù)共享平臺(tái)。之后，數(shù)據(jù)共享將擴(kuò)展到企業(yè)層面，成為未來(lái)行業(yè)的核心。

摘要:大數(shù)據(jù)的出現(xiàn)給未來(lái)信息技術(shù)帶來(lái)了新的機(jī)遇和挑戰(zhàn)。大數(shù)據(jù)對(duì)數(shù)據(jù)處理的有效性和實(shí)時(shí)性提出了更高的要求，當(dāng)前的數(shù)據(jù)處理技術(shù)需要根據(jù)大數(shù)據(jù)的特點(diǎn)進(jìn)行改革，從而形成更有利于大數(shù)據(jù)采集、存儲(chǔ)、處理、管理、分析和共享的新興技術(shù)。本文闡述和分析了大數(shù)據(jù)的產(chǎn)生和發(fā)展、特點(diǎn)、主要應(yīng)用以及帶來(lái)的挑戰(zhàn)。關(guān)鍵詞:BigData物聯(lián)網(wǎng)信息處理海量計(jì)算一、大數(shù)據(jù)的產(chǎn)生和發(fā)展現(xiàn)狀隨著物聯(lián)網(wǎng)、云計(jì)算等信息技術(shù)的快速發(fā)展，大數(shù)據(jù)技術(shù)日益進(jìn)入人們的視線。

目前，人們對(duì)大數(shù)據(jù)的認(rèn)識(shí)并不全面和深入，對(duì)大數(shù)據(jù)的含義也沒(méi)有統(tǒng)一的定義。亞馬遜大數(shù)據(jù)科學(xué)家JohnRauser認(rèn)為，大數(shù)據(jù)是超過(guò)任何計(jì)算機(jī)處理能力的海量數(shù)據(jù)。Informatica中國(guó)首席顧問(wèn)單斌指出:大數(shù)據(jù)是海量數(shù)據(jù)和復(fù)雜類型數(shù)據(jù)的結(jié)合。維基百科將大數(shù)據(jù)定義為許多難以用當(dāng)前數(shù)據(jù)庫(kù)處理的大型復(fù)雜數(shù)據(jù)集。

未來(lái)大數(shù)據(jù)發(fā)展趨勢(shì)分析隨著中國(guó)進(jìn)入大數(shù)據(jù)時(shí)代，很多人對(duì)于大數(shù)據(jù)的發(fā)展趨勢(shì)還處于一種無(wú)知的狀態(tài)。充分提升大數(shù)據(jù)的應(yīng)用，對(duì)中國(guó)所有行業(yè)都會(huì)有非常重要和有效的指導(dǎo)作用。那么，大數(shù)據(jù)的發(fā)展趨勢(shì)是什么？下面，我們來(lái)看看。第一，突破科學(xué)理論。大數(shù)據(jù)的發(fā)展非常迅速。像互聯(lián)網(wǎng)，發(fā)展迅速，影響巨大，對(duì)社會(huì)各行業(yè)都是一次新的技術(shù)革命。相關(guān)技術(shù)的普及對(duì)于科技突破是非常明顯的。

(1)市場(chǎng)規(guī)?？焖僭鲩L(zhǎng)，供給結(jié)構(gòu)初步形成。十二五以來(lái)，我國(guó)大數(shù)據(jù)產(chǎn)業(yè)從無(wú)到有，全國(guó)各地發(fā)展大數(shù)據(jù)的熱情高漲，行業(yè)應(yīng)用快速推進(jìn)，市場(chǎng)規(guī)模大幅增長(zhǎng)。易觀國(guó)際數(shù)據(jù)顯示，2011-2014年，中國(guó)大數(shù)據(jù)市場(chǎng)規(guī)模分別為37.4億元、47.3億元、59億元和75.7億元，年均復(fù)合增長(zhǎng)率約為27%。易觀國(guó)際也預(yù)測(cè)，2015年和2016年中國(guó)大數(shù)據(jù)市場(chǎng)將保持30%左右的增速，到“十二五”末市場(chǎng)規(guī)模將接近100億元。

中國(guó)大數(shù)據(jù)發(fā)展的三大前提大數(shù)據(jù)的經(jīng)濟(jì)價(jià)值已經(jīng)被人們所認(rèn)識(shí)，大數(shù)據(jù)的技術(shù)也逐漸成熟。一旦完成數(shù)據(jù)的整合和監(jiān)管，大數(shù)據(jù)爆炸時(shí)代就要到來(lái)。我們現(xiàn)在要做的就是選擇好自己的方向，為大數(shù)據(jù)的到來(lái)提前做好準(zhǔn)備。大數(shù)據(jù)概念的出現(xiàn)，有賴于短短幾年內(nèi)出現(xiàn)的海量數(shù)據(jù)。據(jù)統(tǒng)計(jì)，互聯(lián)網(wǎng)上的數(shù)據(jù)每?jī)赡攴环?，而目前全?0%以上的數(shù)據(jù)都是近幾年才產(chǎn)生的。

大數(shù)據(jù)發(fā)展的三個(gè)必要條件大數(shù)據(jù)的發(fā)展需要三個(gè)必要條件:數(shù)據(jù)源、數(shù)據(jù)交易和數(shù)據(jù)產(chǎn)生價(jià)值的過(guò)程。近年來(lái)，社交網(wǎng)絡(luò)的興起、物聯(lián)網(wǎng)的發(fā)展和移動(dòng)互聯(lián)網(wǎng)的普及，催生了大量有價(jià)值的數(shù)據(jù)源，為大數(shù)據(jù)的發(fā)展奠定了基礎(chǔ)。大數(shù)據(jù)時(shí)代到來(lái)的重要標(biāo)志是大量專業(yè)“數(shù)據(jù)交易員”的出現(xiàn)，以及圍繞數(shù)據(jù)交易而形成的、貫穿收集、整理、分析、應(yīng)用全過(guò)程的產(chǎn)業(yè)鏈。

很多初學(xué)者對(duì)大數(shù)據(jù)分析的概念比較模糊。什么是大數(shù)據(jù)分析，能做什么，學(xué)習(xí)時(shí)走什么路線，學(xué)習(xí)后往哪里發(fā)展？很多人的印象都是大數(shù)據(jù)分析師坐在辦公室里，對(duì)著電腦敲鍵盤，和程序員差不多。這種想法是錯(cuò)誤的。其實(shí)大數(shù)據(jù)分析師是一個(gè)很高大上的職業(yè)。大數(shù)據(jù)分析師獲取必要的數(shù)據(jù)，分析這些數(shù)據(jù)，然后從數(shù)據(jù)中發(fā)現(xiàn)一些問(wèn)題，提出自己的想法。這是一個(gè)大數(shù)據(jù)分析師的基本工作。

從數(shù)據(jù)上游到數(shù)據(jù)下游，大致可以分為:數(shù)據(jù)采集>數(shù)據(jù)清洗>數(shù)據(jù)存儲(chǔ)>數(shù)據(jù)分析統(tǒng)計(jì)>數(shù)據(jù)可視化等。當(dāng)然，大數(shù)據(jù)分析的內(nèi)容是使用工具組件(Spark、Flume、Kafka等。)或代碼(Java、Scala等。)來(lái)實(shí)現(xiàn)以上功能。具體如下:1。數(shù)據(jù)采集業(yè)務(wù)系統(tǒng)的嵌入式代碼在任何時(shí)刻都會(huì)產(chǎn)生一些分散的原始日志，這些分散的日志可以通過(guò)Flume進(jìn)行監(jiān)控和接收，實(shí)現(xiàn)分散日志的聚合，即采集。

對(duì)中國(guó)大數(shù)據(jù)行業(yè)和企業(yè)問(wèn)題的觀察。大數(shù)據(jù)作為一個(gè)新興行業(yè)，一直處于輿論的風(fēng)口浪尖。就像互聯(lián)網(wǎng) 的概念一樣，大數(shù)據(jù)被神話了，被送上了“宗教”的神壇。大數(shù)據(jù)公司總有一種擔(dān)心，怕大數(shù)據(jù)被捧得太高，以后可能會(huì)跌得很慘。2015年，中國(guó)大數(shù)據(jù)產(chǎn)業(yè)的熱度從貴陽(yáng)大數(shù)據(jù)交易所開始，在9月國(guó)務(wù)院50號(hào)文《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)計(jì)劃》中達(dá)到頂峰。

數(shù)據(jù)給企業(yè)帶來(lái)的具體價(jià)值，數(shù)據(jù)應(yīng)用場(chǎng)景，大數(shù)據(jù)行業(yè)的痛點(diǎn)很少介紹。中國(guó)大數(shù)據(jù)產(chǎn)業(yè)經(jīng)歷了很多陣痛，大數(shù)據(jù)產(chǎn)業(yè)前景很好，但是大數(shù)據(jù)公司很難做大，很難實(shí)現(xiàn)質(zhì)的飛躍，中國(guó)大數(shù)據(jù)行業(yè)的痛點(diǎn)和難點(diǎn)如下。大數(shù)據(jù)企業(yè)那么多，很難做到產(chǎn)業(yè)優(yōu)勢(shì)，全國(guó)大數(shù)據(jù)企業(yè)約200家，近60%集中在北京，以小微企業(yè)為主，年銷售額10億元的企業(yè)幾乎沒(méi)有。