經(jīng)常有人問(wèn)我一個(gè)問(wèn)題:“你搞大數(shù)據(jù)，幫我們出主意。我們?nèi)绾卫么髷?shù)據(jù)？一般來(lái)說(shuō)，我問(wèn)“你有什么數(shù)據(jù)，有什么痛點(diǎn)？我會(huì)告訴你可能有需要改進(jìn)的數(shù)據(jù)，你可以分析哪些值。我來(lái)告訴你如何用數(shù)據(jù)來(lái)改善你的痛點(diǎn)。“大概100個(gè)客戶(hù)的詢(xún)問(wèn)之后，你覺(jué)得我需要一個(gè)方法論體系來(lái)系統(tǒng)的回答這個(gè)問(wèn)題，解決這個(gè)問(wèn)題嗎？因此，筆者提出一套企業(yè)進(jìn)行大數(shù)據(jù)4V整合的方法論，與大家分享。

系統(tǒng):當(dāng)業(yè)務(wù)的運(yùn)營(yíng)需要更多的計(jì)算資源、存儲(chǔ)資源和數(shù)據(jù)管理時(shí)，企業(yè)需要靈活應(yīng)對(duì)這種業(yè)務(wù)的變化。大數(shù)據(jù)系統(tǒng)是基礎(chǔ)，現(xiàn)在的系統(tǒng)Hadoop，Spark，各種大數(shù)據(jù)分析工具都有；數(shù)據(jù):我們要盡可能收集1)內(nèi)部數(shù)據(jù)和2)外部數(shù)據(jù)。沒(méi)有數(shù)據(jù)，就無(wú)從談起數(shù)據(jù)的價(jià)值。

大數(shù)據(jù)是如何改變數(shù)據(jù)庫(kù)結(jié)構(gòu)說(shuō)到“數(shù)據(jù)庫(kù)”，大多數(shù)人會(huì)想到有著30多年歷史的RDBMS。然而，這可能很快就會(huì)改變。大量新的競(jìng)爭(zhēng)者正在爭(zhēng)奪這個(gè)重要的市場(chǎng)。他們的方法五花八門(mén)，但都有一個(gè)共同點(diǎn):極度專(zhuān)注于大數(shù)據(jù)。大部分推動(dòng)新數(shù)據(jù)迭代的衍生品都是基于底層大數(shù)據(jù)的3V特性:數(shù)量、速度、種類(lèi)。本質(zhì)上，今天的數(shù)據(jù)比以往任何時(shí)候都更快、更大、更多樣化。

“基本上，它們不能擴(kuò)展到大量、快速或不同種類(lèi)的數(shù)據(jù)?！币患覕?shù)據(jù)分析和數(shù)據(jù)科學(xué)咨詢(xún)機(jī)構(gòu)的總裁格雷戈里認(rèn)為。這是哈特漢克斯最近發(fā)現(xiàn)的。直到2013年左右，營(yíng)銷(xiāo)服務(wù)組織使用了不同的數(shù)據(jù)庫(kù)，包括MicrosoftSQLServer和Oracle Real Application Cluster(RAC)的組合?！拔覀冏⒁獾?，隨著數(shù)據(jù)的不斷增長(zhǎng)，我們的系統(tǒng)處理信息的速度不夠快，”一家技術(shù)開(kāi)發(fā)公司的負(fù)責(zé)人肖恩說(shuō)。

在互聯(lián)網(wǎng)技術(shù)飛速發(fā)展的今天，掌握數(shù)據(jù)資源是企業(yè)出奇制勝的關(guān)鍵。越來(lái)越多的企業(yè)開(kāi)始關(guān)注大數(shù)據(jù)的戰(zhàn)略布局，重新定義自己的核心競(jìng)爭(zhēng)力。下面是國(guó)內(nèi)大數(shù)據(jù)公司的一些排名。(無(wú)論國(guó)外，數(shù)據(jù)都是未來(lái)競(jìng)爭(zhēng)的核心 force，用國(guó)外的大數(shù)據(jù)平臺(tái)是極不安全的！) 1.阿里云:這個(gè)沒(méi)什么好說(shuō)的。目前，中國(guó)沒(méi)有比這更大的了。

2.華為云:集成高性能計(jì)算和存儲(chǔ)能力，為大數(shù)據(jù)的挖掘和分析提供專(zhuān)業(yè)穩(wěn)定的IT基礎(chǔ)平臺(tái)。最近華為大數(shù)據(jù)存儲(chǔ)實(shí)現(xiàn)了40PB文件系統(tǒng)的統(tǒng)一管理。(華為云目前好像不太對(duì)外開(kāi)放)3。百度:作為國(guó)內(nèi)綜合搜索的巨頭和行業(yè)龍頭，擁有海量數(shù)據(jù)，在自然語(yǔ)言處理能力、機(jī)器深度學(xué)習(xí)等領(lǐng)域經(jīng)驗(yàn)豐富。4.騰訊:騰訊也是大數(shù)據(jù)領(lǐng)域，尤其是社交領(lǐng)域不可忽視的重要力量。光是想想QQ和微信的用戶(hù)數(shù)量就很可怕。