數(shù)據(jù)daily增長(zhǎng)是非?？斓?，所謂“大數(shù)據(jù)分析”，與之前的數(shù)據(jù)分析最重要的區(qū)別在于數(shù)據(jù)分析是犀利的。Gartner(2)海量數(shù)據(jù)數(shù)量、快速數(shù)據(jù)流量和動(dòng)態(tài)數(shù)據(jù)速度、多樣數(shù)據(jù)類型和巨大數(shù)據(jù)價(jià)值，因?yàn)閿?shù)據(jù)quantitative增長(zhǎng)，對(duì)數(shù)據(jù)的存儲(chǔ)、查詢和分析的需求迅速增加，“大數(shù)據(jù)”有多大？什么是大數(shù)據(jù)。

隨著時(shí)間和業(yè)務(wù)的發(fā)展，庫(kù)中的數(shù)據(jù)quantity增長(zhǎng)不可控，庫(kù)和表中的數(shù)據(jù)會(huì)越來(lái)越大，帶來(lái)更高的磁盤(pán)。因此，在業(yè)務(wù)擴(kuò)展的過(guò)程中，應(yīng)用對(duì)數(shù)據(jù) library系統(tǒng)的健壯性、安全性和可擴(kuò)展性提出了更高的要求。下面，我先從數(shù)據(jù)庫(kù)架構(gòu)，選擇和落地說(shuō)起。數(shù)據(jù)圖書(shū)館將面臨哪些挑戰(zhàn)？

為了解決以上問(wèn)題，數(shù)據(jù) library衍生出了不同的架構(gòu)來(lái)解決不同的場(chǎng)景需求。數(shù)據(jù) library的寫(xiě)操作和讀操作是分開(kāi)的，主庫(kù)接收寫(xiě)請(qǐng)求，用多個(gè)從庫(kù)副本處理讀請(qǐng)求。從庫(kù)和主庫(kù)同步更新數(shù)據(jù)并保持?jǐn)?shù)據(jù)的一致性，從庫(kù)可以橫向擴(kuò)展以滿足讀取請(qǐng)求的增加。這種模式也叫讀寫(xiě)分離，針對(duì)的是小規(guī)模數(shù)據(jù)并且有大量的讀操作。

雖然近兩年“Da 數(shù)據(jù)”的概念越來(lái)越多地被媒體和業(yè)界提及，但“Da 數(shù)據(jù)分析”在國(guó)內(nèi)的發(fā)展還處于起步階段。數(shù)據(jù)分析是數(shù)據(jù)處理流的核心，因?yàn)閿?shù)據(jù)中包含的值來(lái)自于分析的過(guò)程。所謂“大數(shù)據(jù)分析”與之前的數(shù)據(jù)分析最重要的區(qū)別在于數(shù)據(jù)量是尖銳的增長(zhǎng)。因?yàn)閿?shù)據(jù)quantitative增長(zhǎng)，對(duì)數(shù)據(jù)的存儲(chǔ)、查詢和分析的需求迅速增加。“Da 數(shù)據(jù) Analysis”從實(shí)用的角度出發(fā)，需要通過(guò)對(duì)原數(shù)據(jù)的分析，探索出一種模式，找出真實(shí)情況的根本原因，通過(guò)建立模型和預(yù)測(cè)進(jìn)行優(yōu)化，從而實(shí)現(xiàn)社會(huì)運(yùn)行中各個(gè)領(lǐng)域的不斷改進(jìn)和創(chuàng)新。

由于互聯(lián)網(wǎng)和計(jì)算機(jī)的廣泛普及，IDC預(yù)測(cè)到2011年，全球?qū)⒂?，800，000，000 TB/123，456，789-0/，也就是1.8 zb。數(shù)字世界正在以難以想象的速度擴(kuò)張，消費(fèi)者和企業(yè)將把大量自己的圖像、視頻和文件/123，456，789-去年，全球總量/123，456，789-0/達(dá)到2.81億TB，2011年將超過(guò)1.8ZB，約為2006年的10倍。目前消費(fèi)級(jí)硬盤(pán)最大容量是1TB。

什么是大數(shù)據(jù)？列舉三種常用的大數(shù)據(jù):①具有強(qiáng)大決策、洞察和流程優(yōu)化能力的海量、高增長(zhǎng)和多元化的信息資產(chǎn)需要新的處理模式。Gartner(2)海量數(shù)據(jù)數(shù)量、快速數(shù)據(jù)流量和動(dòng)態(tài)數(shù)據(jù)速度、多樣數(shù)據(jù)類型和巨大數(shù)據(jù)價(jià)值。IDC(3)要么是massive 數(shù)據(jù)，要么是massive 數(shù)據(jù)，要么是large 數(shù)據(jù)，這意味著所涉及的數(shù)據(jù)太大，無(wú)法在合理的時(shí)間內(nèi)進(jìn)行攔截、管理、處理和整理。

首先是“大尺度”，可以從兩個(gè)維度來(lái)衡量。一是從時(shí)間序列中積累大量的數(shù)據(jù)，二是對(duì)數(shù)據(jù)進(jìn)行深度提煉。其次，“多樣化”可以是不同的數(shù)據(jù)格式，如文字、圖片、視頻等。，可以是不同的數(shù)據(jù)類別，比如人口數(shù)據(jù)，經(jīng)濟(jì)數(shù)據(jù)，等等。，或者可能有不同的數(shù)據(jù)來(lái)源，如互聯(lián)網(wǎng)和傳感器。第三，“動(dòng)態(tài)”。數(shù)據(jù)是不斷變化的，可以隨時(shí)間迅速增加一個(gè)較大的量數(shù)據(jù)，也可以在空間上不斷運(yùn)動(dòng)變化數(shù)據(jù)。

電腦時(shí)代充滿了榮耀和夢(mèng)想，白手起家成為億萬(wàn)富翁的神話層出不窮。蘋(píng)果電腦的史蒂夫·喬布斯，戴爾電腦的比爾·史蒂夫·喬布斯，微軟和邁克爾·戴爾，但他們?nèi)f萬(wàn)沒(méi)想到，僅僅兩年時(shí)間，就有人踏入了他們的行列。這是互聯(lián)網(wǎng)上最受歡迎的雅虎！創(chuàng)始人:楊致遠(yuǎn)。“生在正確的時(shí)間正確的地點(diǎn)”楊致遠(yuǎn)，

2歲失去父親，10歲隨母親移民加州。雖然開(kāi)學(xué)第一天只認(rèn)識(shí)一個(gè)英文單詞，但他學(xué)習(xí)成績(jī)很好，順利進(jìn)入了斯坦福大學(xué)電子工程系，這是硅谷的人才搖籃，惠普，Sun，SGI，Intel，AMD，思科，電子藝界，3DO都很有名。