云計(jì)算和大數(shù)據(jù)概述云計(jì)算是一種基于互聯(lián)網(wǎng)增加、使用和交付相關(guān)服務(wù)的模式，通常涉及通過(guò)互聯(lián)網(wǎng)提供動(dòng)態(tài)可擴(kuò)展且往往是虛擬化的資源。云是網(wǎng)絡(luò)和互聯(lián)網(wǎng)的隱喻。在過(guò)去，云經(jīng)常被用來(lái)表示電信網(wǎng)絡(luò)，后來(lái)它也被用來(lái)表示互聯(lián)網(wǎng)和底層基礎(chǔ)設(shè)施的抽象。狹義的云計(jì)算是指IT基礎(chǔ)設(shè)施的交付和使用方式，指通過(guò)網(wǎng)絡(luò)以按需、易擴(kuò)展的方式獲取所需資源；廣義的云計(jì)算是指服務(wù)的交付和使用方式，是指通過(guò)網(wǎng)絡(luò)以按需、可擴(kuò)展的方式獲取所需的服務(wù)。

意味著計(jì)算能力也可以通過(guò)互聯(lián)網(wǎng)作為商品流通。大數(shù)據(jù)(Bigdata)，或稱海量數(shù)據(jù)，是指涉及如此巨大的數(shù)據(jù)量，以至于無(wú)法在合理的時(shí)間內(nèi)對(duì)其進(jìn)行捕獲、管理、處理和整理，以幫助企業(yè)通過(guò)當(dāng)前主流的軟件工具做出更加積極的商業(yè)決策的信息。大數(shù)據(jù)的4V特征:量、速、變、準(zhǔn)。技術(shù)上來(lái)說(shuō)，

如何正確建立大數(shù)據(jù)的結(jié)構(gòu)？各行各業(yè)的大數(shù)據(jù)企業(yè)都提供了潛力。正確使用這些大數(shù)據(jù)信息可以增加商業(yè)價(jià)值，幫助您的企業(yè)在市場(chǎng)競(jìng)爭(zhēng)中脫穎而出。以下是企業(yè)應(yīng)用大數(shù)據(jù)的幾個(gè)成功案例:大數(shù)據(jù)的例子汽車廠商已經(jīng)開(kāi)始利用大數(shù)據(jù)來(lái)了解汽車何時(shí)需要返廠維修。使用汽車發(fā)動(dòng)機(jī)的數(shù)百個(gè)傳感器可以向汽車制造商發(fā)送實(shí)時(shí)數(shù)據(jù)信息，使他們甚至在駕駛員之前就知道汽車何時(shí)會(huì)發(fā)生故障。

零售業(yè)也開(kāi)始越來(lái)越多地使用大數(shù)據(jù)。鑒于越來(lái)越多的產(chǎn)品有了RFID標(biāo)簽，它可以幫助零售商跟蹤產(chǎn)品，知道很少有產(chǎn)品缺貨，并及時(shí)向供應(yīng)商訂購(gòu)新產(chǎn)品。沃爾瑪是正確使用大數(shù)據(jù)的一個(gè)很好的例子。當(dāng)零售商開(kāi)始識(shí)別他們的客戶時(shí)，他們可以更好地建立商店，更好地滿足客戶的需求。當(dāng)然，這只是幾個(gè)簡(jiǎn)單的例子，大數(shù)據(jù)的可能性幾乎是無(wú)窮無(wú)盡的。

大數(shù)據(jù)快速處理的架構(gòu)設(shè)計(jì)在處理業(yè)務(wù)數(shù)據(jù)的過(guò)程中，經(jīng)常會(huì)遇到夜間批量處理大量數(shù)據(jù)的情況，并且會(huì)有時(shí)間限制的要求。尤其是應(yīng)用系統(tǒng)運(yùn)行2年以上，會(huì)有大表或者超大表的操作，數(shù)據(jù)量會(huì)達(dá)到幾百萬(wàn)甚至上億。這時(shí)候回頭看看之前的設(shè)計(jì)，會(huì)發(fā)現(xiàn)很多問(wèn)題?？赡苁菙?shù)據(jù)模型設(shè)計(jì)沒(méi)有考慮表的分區(qū)和及時(shí)歸檔，sql設(shè)計(jì)沒(méi)有考慮索引或全表掃描，數(shù)據(jù)處理沒(méi)有考慮及時(shí)批量分段，并發(fā)處理的多線程可配置性等。，所以以后的設(shè)計(jì)不要走同樣的錯(cuò)誤道路。

1最初應(yīng)考慮歸檔和分區(qū)。所有可能的大表設(shè)計(jì)都應(yīng)該在一開(kāi)始就考慮歸檔和分區(qū)。數(shù)據(jù)達(dá)到高水位線后，即使有存檔，高水位線也不會(huì)降低，可能會(huì)消耗性能，所以需要及時(shí)存檔和轉(zhuǎn)移數(shù)據(jù)。最好設(shè)置一個(gè)分區(qū)表，這樣可以及時(shí)截?cái)嗷騺G棄分區(qū)表，然后重新添加。存儲(chǔ)可以靈活控制。2sql條件精確定位。

一般來(lái)說(shuō)，架構(gòu)有兩個(gè)要素:它是一個(gè)軟件系統(tǒng)從整體到部分的最高層次劃分。一個(gè)系統(tǒng)通常是由組件組成的，這些組件是如何形成的，它們之間是如何相互作用的，這是關(guān)于系統(tǒng)本身結(jié)構(gòu)的重要信息，詳細(xì)來(lái)說(shuō)，需要包含架構(gòu)元素()、連接器、Taskflow等所謂的架構(gòu)元素。即系統(tǒng)的核心磚塊，而連接器描述了這些組件之間的通信路徑、通信機(jī)制和預(yù)期結(jié)果，任務(wù)流描述了系統(tǒng)如何使用這些組件和連接器來(lái)完成未來(lái)構(gòu)建系統(tǒng)時(shí)難以改變的最高級(jí)別的商業(yè)和技術(shù)決策，在構(gòu)建一個(gè)系統(tǒng)之前，會(huì)有很多重要的決策需要提前做出。一旦系統(tǒng)開(kāi)始設(shè)計(jì)甚至詳細(xì)構(gòu)建，顯然，這樣的決策一定是關(guān)系到系統(tǒng)設(shè)計(jì)成敗的最重要的決策，必須經(jīng)過(guò)仔細(xì)的研究和調(diào)查，計(jì)算機(jī)軟件的歷史始于20世紀(jì)50年代，歷史很短。相比之下，建筑工程始于石器時(shí)代，人類在幾千年的建筑設(shè)計(jì)實(shí)踐中積累了大量的經(jīng)驗(yàn)和教訓(xùn)，建筑設(shè)計(jì)基本包括兩點(diǎn)，一是建筑風(fēng)格，二是建筑風(fēng)格的獨(dú)特和對(duì)建筑的恰當(dāng)選擇。