這個(gè)只能說(shuō)是主流技術(shù)，不能說(shuō)是核心技術(shù)；目前國(guó)內(nèi)很多公司在Hadoop生態(tài)系統(tǒng)中主要使用數(shù)據(jù)，如Hadoop、yarn、zookeeper、kafka、flume、spark、hive、Hbase等。這些東西用的比較多，不是說(shuō)只有-。所以這個(gè)問題你先有問題。大數(shù)據(jù)是方向場(chǎng)，就像你問什么是飲食，它有哪些方面。

在ForresterResearch最近的一份研究報(bào)告中，對(duì)數(shù)據(jù)的整個(gè)生命周期中的22個(gè)物種技術(shù)的成熟度和軌跡進(jìn)行了評(píng)估。這些技術(shù)為Da 數(shù)據(jù)的實(shí)時(shí)、預(yù)測(cè)、全面洞察做出了巨大貢獻(xiàn)。1.預(yù)測(cè)分析技術(shù)這也是Da 數(shù)據(jù)的主要功能之一。預(yù)測(cè)分析允許公司通過分析大型數(shù)據(jù)來(lái)源來(lái)發(fā)現(xiàn)、評(píng)估、優(yōu)化和部署預(yù)測(cè)模型，從而提高業(yè)務(wù)績(jī)效或降低風(fēng)險(xiǎn)。同時(shí)“Da 數(shù)據(jù)”的預(yù)測(cè)分析也與我們的生活息息相關(guān)。

問答太多，不能發(fā)鏈接，不然我給你鏈接。有Hadoop 數(shù)據(jù)和編程語(yǔ)言等開源項(xiàng)目，下面是big 數(shù)據(jù)底層技術(shù)。簡(jiǎn)單來(lái)說(shuō)，根據(jù)永紅科技的技術(shù)，有四個(gè)方面，實(shí)際上代表了一些通用大數(shù)據(jù)bottom技術(shù):Z Suite具有高性能大數(shù)據(jù)分析能力，她完全拋棄了ScaleUp。ZSuite主要支持PB級(jí)大數(shù)據(jù)通過以下核心技術(shù):跨粒度InDatabaseComputing)ZSuite支持各種常用匯總和幾乎所有的專業(yè)統(tǒng)計(jì)功能。

總之有三個(gè)核心技術(shù):take數(shù)據(jù)，calculate 數(shù)據(jù)，sell 數(shù)據(jù)?；A(chǔ)技術(shù)集合包括數(shù)據(jù)預(yù)處理、分布式存儲(chǔ)、NOSQL 數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)、機(jī)器學(xué)習(xí)、并行。數(shù)據(jù)的預(yù)處理是指在對(duì)數(shù)據(jù)進(jìn)行分析之前，對(duì)采集到的原始數(shù)據(jù)進(jìn)行“清洗、填充、平滑、合并、歸一化、一致性檢查”等一系列操作，以改進(jìn)/1234。

數(shù)據(jù)清洗:指數(shù)據(jù)(缺少感興趣的屬性)，noise數(shù)據(jù)(數(shù)據(jù))使用ETL等清洗工具出現(xiàn)錯(cuò)誤或偏離預(yù)期的地方。數(shù)據(jù) Integration:指數(shù)據(jù)來(lái)自不同來(lái)源，存儲(chǔ)在統(tǒng)一的數(shù)據(jù)庫(kù)中的存儲(chǔ)方法，重點(diǎn)解決模式匹配和三個(gè)問題。數(shù)據(jù) Conversion:指對(duì)提取的數(shù)據(jù)中的不一致進(jìn)行處理的過程。還包括數(shù)據(jù)清洗的工作，即根據(jù)業(yè)務(wù)規(guī)則清洗異常數(shù)據(jù)以保證后續(xù)分析結(jié)果的準(zhǔn)確性。

Da 數(shù)據(jù)-2/指的是Da 數(shù)據(jù)的應(yīng)用并涵蓋了各類Da 數(shù)據(jù)平臺(tái)和Da。Da 數(shù)據(jù)是多學(xué)科與統(tǒng)計(jì)學(xué)交叉產(chǎn)生的一門新學(xué)科，大數(shù)據(jù)涉數(shù)據(jù)采礦，云計(jì)算之類的，所以我是計(jì)算機(jī)專業(yè)的。分布廣泛，應(yīng)用行業(yè)多，大數(shù)據(jù)(bigdata)，IT行業(yè)術(shù)語(yǔ)，指在一定時(shí)間范圍內(nèi)，常規(guī)軟件工具無(wú)法捕捉、管理和處理的數(shù)據(jù)的集合。它是一種海量、高增長(zhǎng)、多元化的信息資產(chǎn)，需要一種新的處理模式，以具備更強(qiáng)的決策、洞察和流程優(yōu)化能力。