二、機(jī)器學(xué)習(xí)相關(guān)的項(xiàng)目數(shù)據(jù)大部分都是機(jī)器學(xué)習(xí)相關(guān)的。所以我們會(huì)考慮一些機(jī)器學(xué)習(xí)的軟件，比如sklearn，spark ml，當(dāng)然還有我們自己的代碼。三、web相關(guān)技術(shù)大部分項(xiàng)目都不能運(yùn)行一個(gè)web展示，所以web很重要。java ssh和python django都可以。這要看具體項(xiàng)目組的習(xí)慣。第四，還有其他非常常用的東西。個(gè)人認(rèn)為不完全算大數(shù)據(jù)具體使用范圍。

大型分析常用的六種工具數(shù)據(jù)處理:1。Hadoop是一個(gè)軟件框架，可以分發(fā)大量的數(shù)據(jù)。但是Hadoop是以一種可靠、高效和可擴(kuò)展的方式處理的。Hadoop之所以可靠，是因?yàn)樗僭O(shè)計(jì)算元素和存儲(chǔ)會(huì)失效，所以它維護(hù)了數(shù)據(jù)的多個(gè)副本，以確?？梢詾槭У墓?jié)點(diǎn)重新分配處理。Hadoop是高效的，因?yàn)樗圆⑿蟹绞焦ぷ?，從而加快了處理速度?/p>

另外，Hadoop依賴于社區(qū)服務(wù)器，所以成本相對(duì)較低，任何人都可以使用。2，HPCCHPCC，高性能計(jì)算和通信的縮寫(xiě)。1993年，美國(guó)聯(lián)邦科學(xué)、工程與技術(shù)協(xié)調(diào)委員會(huì)向國(guó)會(huì)提交了《重大挑戰(zhàn)項(xiàng)目:高性能計(jì)算與通信》報(bào)告，該報(bào)告也被稱為HPCC計(jì)劃報(bào)告，即美國(guó)總統(tǒng)的科學(xué)戰(zhàn)略項(xiàng)目。其目的是通過(guò)加強(qiáng)研究和開(kāi)發(fā)來(lái)解決一些重要的科學(xué)和技術(shù)挑戰(zhàn)。

Java:你只需要知道一些基礎(chǔ)知識(shí)。要做大數(shù)據(jù)不需要很深的Java技術(shù)。學(xué)習(xí)javaSE相當(dāng)于學(xué)習(xí)big 數(shù)據(jù)?；A(chǔ)Linux:因?yàn)镈a數(shù)據(jù)Related軟件都運(yùn)行在Linux上，所以要把Linux學(xué)的更扎實(shí)。學(xué)好Linux對(duì)你快速掌握Da 數(shù)據(jù)相關(guān)技術(shù)會(huì)有很大的幫助?？梢愿玫牧私鈎adoop、hive、hbase、spark等的運(yùn)行環(huán)境和網(wǎng)絡(luò)環(huán)境配置。數(shù)據(jù) 軟件，可以少踩很多坑，通過(guò)學(xué)習(xí)shell可以理解腳本，更容易理解和配置大型數(shù)據(jù) cluster。

好了，說(shuō)完了基礎(chǔ)，再來(lái)說(shuō)說(shuō)我們需要學(xué)習(xí)哪些大數(shù)據(jù)技術(shù)，可以按照我寫(xiě)的順序來(lái)學(xué)。Hadoop:這是現(xiàn)在流行的big 數(shù)據(jù)處理平臺(tái)，幾乎已經(jīng)成為big 數(shù)據(jù)的代名詞，所以這是必須的。Hadoop包括幾個(gè)組件:HDFS、MapRece和YARN。HDFS是存放數(shù)據(jù)的地方，就像我們電腦的硬盤(pán)一樣。MapRece處理計(jì)算數(shù)據(jù)，它有一個(gè)特點(diǎn)就是不管多大的數(shù)據(jù)，只要給定時(shí)間都可以存儲(chǔ)。

do 數(shù)據(jù)分析，有哪些比較好的軟件？數(shù)據(jù)分析 軟件種類很多，每一種都適合不同類型的人。簡(jiǎn)單來(lái)說(shuō):Excel:通用應(yīng)用，基礎(chǔ)和高級(jí)都有。Excel透視表一般用于中級(jí)，ExcelVBA用于高級(jí)。Hihidata:一個(gè)比較小的數(shù)據(jù)分析工具。三分鐘就能學(xué)會(huì)直接上手?？梢灾苯釉诰€使用，不需要下載安裝。SPSS:專業(yè)統(tǒng)計(jì)軟件，沒(méi)有統(tǒng)計(jì)技能很難用。

SAS:專業(yè)統(tǒng)計(jì)軟件，針對(duì)專業(yè)人士。如果你不知道如何編程，就不要碰它。MARLAB:建立統(tǒng)計(jì)和數(shù)學(xué)模型，但是很難學(xué)習(xí)和入門(mén)。Eview:比較小，建立一些經(jīng)濟(jì)模型還是很有用的。它常用于計(jì)量經(jīng)濟(jì)學(xué)。各種BI和報(bào)告工具:FineBI、FineReport、tableau、QlikView等。

常用大數(shù)據(jù)分析 -1/Yes 1。專業(yè)大數(shù)據(jù)分析工具2。各種python數(shù)據(jù)可視化第三方庫(kù)3。其他語(yǔ)言。FineReportFineReport是一款純Java編寫(xiě)的企業(yè)級(jí)web報(bào)表工具，集成了數(shù)據(jù) presentation(報(bào)表)和數(shù)據(jù) entry(表單)的功能。只需簡(jiǎn)單的拖拽，就可以設(shè)計(jì)復(fù)雜的中國(guó)式報(bào)表，構(gòu)建a 數(shù)據(jù)決策分析系統(tǒng)。

1。大數(shù)據(jù)是指在可承受的時(shí)間范圍內(nèi)，常規(guī)軟件工具無(wú)法捕獲、管理和處理的數(shù)據(jù)的集合。2.Excel，SPSS，StyleIntelligence，Cognos，Bo，微軟，Oracle，Microstrategy，QlikView，Tableau，中國(guó)的郭云數(shù)據(jù)(large數(shù)據(jù)魔鏡)，F(xiàn)ineBI，永宏科技永宏套件等等。

告訴我一些常用的大號(hào)數(shù)據(jù)分析工具1。專業(yè)大號(hào)數(shù)據(jù)分析工具2。各種Python 數(shù)據(jù)可視化第三方庫(kù)3。其他語(yǔ)言數(shù)據(jù) visual framework 1。FineReportFineReport是一款純Java編寫(xiě)的企業(yè)級(jí)web報(bào)表工具，集成了數(shù)據(jù) presentation(報(bào)表)和數(shù)據(jù) entry(表單)的功能。只需簡(jiǎn)單的拖拽，就可以設(shè)計(jì)復(fù)雜的中國(guó)式報(bào)表，構(gòu)建a 數(shù)據(jù)決策分析系統(tǒng)。

FineBI的使用感和Tableau差不多，都提倡可視化的探索性分析，有點(diǎn)像數(shù)據(jù) pivot table的加強(qiáng)版。易于使用，豐富的可視化庫(kù)，可以作為數(shù)據(jù) report的入口，也可以作為經(jīng)營(yíng)分析的平臺(tái)。二、Python的數(shù)據(jù)可視化第三方庫(kù)Python正在慢慢成為挖掘領(lǐng)域的主流語(yǔ)言之一，在Python生態(tài)系統(tǒng)中，很多開(kāi)發(fā)者提供了非常豐富的數(shù)據(jù) visual第三方庫(kù)，用于各種場(chǎng)景。