2019，我們將進(jìn)入數(shù)字化轉(zhuǎn)型的關(guān)鍵時(shí)期。所謂“攻關(guān)”，即數(shù)字化轉(zhuǎn)型2.0階段，需要對企業(yè)的關(guān)鍵業(yè)務(wù)進(jìn)行攻關(guān)，如云、數(shù)字化轉(zhuǎn)型等。市場研究公司IDC的一份報(bào)告中指出，自2014年IDC提出數(shù)字化轉(zhuǎn)型以來，看到企業(yè)在數(shù)字化轉(zhuǎn)型上投入了大量的人力物力，但效果并不理想。有的企業(yè)成功地站在了潮流的最前沿，有的企業(yè)在逆流而上，有的企業(yè)只能在浪潮中被動前行。

IDC認(rèn)為，現(xiàn)階段企業(yè)急需解決的是提升數(shù)字化能力，包括:與業(yè)務(wù)深度融合的能力；數(shù)據(jù)處理和挖掘能力；以及IT技術(shù)運(yùn)營管理能力。尤其是數(shù)據(jù)處理和挖掘能力，因?yàn)閿?shù)字化轉(zhuǎn)型推動企業(yè)從流程導(dǎo)向型向數(shù)據(jù)導(dǎo)向型轉(zhuǎn)變，海量、異構(gòu)、多類型數(shù)據(jù)的處理和挖掘能力是釋放數(shù)據(jù)價(jià)值的前提，數(shù)據(jù)生命周期的管控是釋放數(shù)據(jù)價(jià)值的保障。

存儲是技術(shù)研究方向，不錯(cuò)，創(chuàng)業(yè)不是好生意。中國不可能出現(xiàn)cloudera這樣的公司。在國內(nèi)做基礎(chǔ)軟件基本沒有商業(yè)前景。而阿里則做了一些基礎(chǔ)的技術(shù)開發(fā)，但都是基于自己的業(yè)務(wù)特點(diǎn)。以他們的dubbo框架為例。最近一次作案是在兩年前。據(jù)說球隊(duì)解散了。你想表達(dá)什么？從社區(qū)孵化出來的和國內(nèi)大公司內(nèi)部孵化出來的還是有很大區(qū)別的。

大數(shù)據(jù)的起源給了“大數(shù)據(jù)”研究機(jī)構(gòu)Gartner這樣的定義?！按髷?shù)據(jù)”是一種信息資產(chǎn)，需要新的處理模式來擁有更強(qiáng)的決策、洞察和流程優(yōu)化能力，以適應(yīng)海量、高增長率和多樣化。麥肯錫全球研究院給出的定義是:規(guī)模遠(yuǎn)遠(yuǎn)超出傳統(tǒng)數(shù)據(jù)庫軟件工具在獲取、存儲、管理和分析方面能力的數(shù)據(jù)集，具有數(shù)據(jù)規(guī)模海量、數(shù)據(jù)流動迅速、數(shù)據(jù)類型多樣、價(jià)值密度低四大特征。

換句話說，如果把大數(shù)據(jù)比作一個(gè)行業(yè)，那么這個(gè)行業(yè)盈利的關(guān)鍵就在于提高數(shù)據(jù)的“處理能力”，通過“處理”實(shí)現(xiàn)數(shù)據(jù)的“增值”。從技術(shù)上講，大數(shù)據(jù)和云計(jì)算的關(guān)系就像硬幣的正反面一樣密不可分。大數(shù)據(jù)不能由單臺計(jì)算機(jī)處理，必須采用分布式架構(gòu)。其特點(diǎn)是對海量數(shù)據(jù)進(jìn)行分布式數(shù)據(jù)挖掘。但它必須依賴云計(jì)算的分布式處理、分布式數(shù)據(jù)庫、云存儲和虛擬化技術(shù)。

分布式數(shù)據(jù)有不同的理論支持。目前國內(nèi)數(shù)據(jù)排名第一的TiDB官方社區(qū)(AskTUG)可以理解TiDB的橫向彈性擴(kuò)張。通過簡單地添加新節(jié)點(diǎn)，可以實(shí)現(xiàn)TiDB的橫向擴(kuò)展，根據(jù)需要擴(kuò)展吞吐量或存儲，從而輕松應(yīng)對高并發(fā)、海量數(shù)據(jù)場景。分布式事務(wù)TiDB100%支持標(biāo)準(zhǔn)ACID事務(wù)。與傳統(tǒng)的主從(MS)復(fù)制方案相比，基于Raft的多數(shù)選舉協(xié)議可以在財(cái)務(wù)層面提供100%強(qiáng)的數(shù)據(jù)一致性保證，可以在不丟失大部分副本的情況下，實(shí)現(xiàn)無需人工干預(yù)的自動故障轉(zhuǎn)移。

華為云、阿里云、騰訊云都推出了分布式數(shù)據(jù)庫服務(wù)。無限擴(kuò)展自動水平分裂。支持字符串、數(shù)字、日期等多緯度。業(yè)務(wù)不間斷順利擴(kuò)展。卓越的性能性能可以通過橫向擴(kuò)展得到線性提升。易于使用，兼容MYSQL協(xié)議，語法和客戶端。輕松導(dǎo)入數(shù)據(jù)，云端數(shù)據(jù)庫。一鍵式數(shù)據(jù)庫擴(kuò)展。業(yè)務(wù)零代碼變更，實(shí)現(xiàn)讀寫分離。快速部署可以快速在線部署實(shí)例，節(jié)省采購、部署、配置等自建數(shù)據(jù)庫工作，縮短項(xiàng)目周期，幫助業(yè)務(wù)快速上線。

單機(jī)數(shù)據(jù)庫的現(xiàn)狀與困境隨著互聯(lián)網(wǎng)的快速發(fā)展，企業(yè)數(shù)據(jù)越來越龐大，應(yīng)用對性能的要求也越來越高。單機(jī)數(shù)據(jù)庫在處理大量數(shù)據(jù)時(shí)有一定的局限性:單機(jī)數(shù)據(jù)庫容易出現(xiàn)容量和性能瓶頸。在目前的硬件條件下，主流數(shù)據(jù)庫可以支持單個(gè)表存儲上千萬的數(shù)據(jù)，但很難支持密集的并發(fā)讀寫，存在性能瓶頸。傳統(tǒng)的分區(qū)表或數(shù)據(jù)庫方案限制太多，數(shù)據(jù)不能跨實(shí)例存儲，可擴(kuò)展性和可維護(hù)性差。

1。數(shù)據(jù)獨(dú)立性和位置透明性數(shù)據(jù)獨(dú)立性是數(shù)據(jù)庫方法追求的主要目標(biāo)之一。分布式透明意味著用戶不必關(guān)心數(shù)據(jù)的邏輯分區(qū)、數(shù)據(jù)的物理位置分布細(xì)節(jié)、副本(冗余數(shù)據(jù))的一致性以及數(shù)據(jù)庫在本地站點(diǎn)上支持什么數(shù)據(jù)模型。分布式透明的優(yōu)勢是顯而易見的。使用分布式透明性，用戶的應(yīng)用程序編寫時(shí)就好像數(shù)據(jù)不是分布式的一樣。

添加某些數(shù)據(jù)的重復(fù)副本時(shí)，無需重寫應(yīng)用程序。系統(tǒng)將數(shù)據(jù)分布信息存儲在數(shù)據(jù)字典中，用戶訪問非本地?cái)?shù)據(jù)的請求由系統(tǒng)根據(jù)數(shù)據(jù)字典進(jìn)行解釋、轉(zhuǎn)換和傳輸。2.在分布式數(shù)據(jù)庫中，集中化和節(jié)點(diǎn)自治相結(jié)合，數(shù)據(jù)共享有兩個(gè)層次:一個(gè)是本地共享，即本地站點(diǎn)中用戶的共享數(shù)據(jù)存儲在本地?cái)?shù)據(jù)庫中。這些數(shù)據(jù)通常由本網(wǎng)站的用戶使用，第二種是全局共享，即分布式數(shù)據(jù)庫中的所有站點(diǎn)也存儲可以被網(wǎng)絡(luò)中其他站點(diǎn)的用戶共享的數(shù)據(jù)，以支持系統(tǒng)中的全局應(yīng)用。