2.熟悉NoSQL數(shù)據(jù)庫(mongodb，redis)，能夠配置和優(yōu)化數(shù)據(jù)庫；熟悉Hadoop相關(guān)生態(tài)系統(tǒng)，包括但不限于HDFS、Hbase、ZooKeeper、spark、yarn、hive等。，能夠獨立部署和實施大數(shù)據(jù)項目，解決項目中的問題，優(yōu)化系統(tǒng)。

大數(shù)據(jù)分析需要5、大數(shù)據(jù)分析需要什么軟件

Hadoop。Hadoop是一個可以分發(fā)大量數(shù)據(jù)的軟件框架。但是Hadoop是以一種可靠、高效和可擴展的方式處理的。Hadoop之所以可靠，是因為它假設(shè)計算元素和存儲會出現(xiàn)故障，所以它維護工作數(shù)據(jù)的多個副本，以確保可以為出現(xiàn)故障的節(jié)點重新分配處理。Hadoop是高效的，因為它以并行方式工作，從而加快了處理速度。

Java:只要懂一些基礎(chǔ)，做大數(shù)據(jù)不需要很深的Java技術(shù)。學(xué)習(xí)javaSE相當(dāng)于學(xué)習(xí)大數(shù)據(jù)。Linux:因為大數(shù)據(jù)相關(guān)的軟件運行在Linux上，所以要把Linux學(xué)扎實。學(xué)好Linux對你快速掌握大數(shù)據(jù)相關(guān)技術(shù)有很大的幫助，能讓你更好的了解hadoop、hive、hbase、spark等大數(shù)據(jù)軟件的運行環(huán)境和網(wǎng)絡(luò)環(huán)境配置。，讓你少踩很多坑，學(xué)會理解腳本，讓你更容易理解和配置大數(shù)據(jù)集群。

動物園管理員:這是靈丹妙藥。安裝Hadoop的HA時會用到，以后的Hbase也會用到。Mysql:我們已經(jīng)學(xué)完了大數(shù)據(jù)的處理，接下來還要學(xué)習(xí)小數(shù)據(jù)的處理工具mysql數(shù)據(jù)庫，因為后面安裝hive的時候會用到。mysql需要掌握什么水平？您可以在Linux上安裝它，運行它，配置簡單的權(quán)限，修改root的密碼，并創(chuàng)建一個數(shù)據(jù)庫。

大數(shù)據(jù)分析軟件很多，其中SQL數(shù)據(jù)分析、Excel數(shù)據(jù)分析、SPSS數(shù)據(jù)分析、SAS數(shù)據(jù)分析、R數(shù)據(jù)分析都是相當(dāng)不錯的。1.對于許多數(shù)據(jù)分析師來說，獲取數(shù)據(jù)是一項基本技能。你可以翻翻很多數(shù)據(jù)分析崗位的招聘廣告，不管實際需要與否，你都會寫“掌握SQL”這篇文章。SQL沒那么復(fù)雜，只是學(xué)習(xí)數(shù)據(jù)檢索，高級查詢，簡單的數(shù)據(jù)清理等等。

其自帶的ToolPak(分析工具庫)和Solver(編程求解的外接程序)可以完成基本的描述統(tǒng)計、方差分析、統(tǒng)計檢驗、傅立葉分析、線性回歸分析和線性規(guī)劃求解。Excel還提供了比較常用的統(tǒng)計圖形繪制功能。3、SPSS數(shù)據(jù)分析SPSS是一款專業(yè)的統(tǒng)計分析軟件，除了基本的統(tǒng)計分析功能外，還提供了非線性回歸、聚類分析、主成分分析和基本的時間序列分析。

Hadoop是一個可以分發(fā)大量數(shù)據(jù)的軟件框架。但是Hadoop是以一種可靠、高效和可擴展的方式處理的。PaxataPaxata是少數(shù)專注于數(shù)據(jù)清理和預(yù)處理的組織之一，它是一個易于使用的MSExcel應(yīng)用程序。PowerPoint軟件:大部分人用PPT寫報告。Visio、SmartDraw軟件:這些是非常有用的流程圖、營銷圖表、地圖等。，而且你可以從這里得到許多零件；

數(shù)據(jù)是平臺運營者的重要資產(chǎn)。它可能會提供API接口讓第三方有限使用，但顯然是為了增強自己的業(yè)務(wù)，任何與此目的相沖突的行為都會受到約束。數(shù)據(jù)收集主要是通過計算機和網(wǎng)絡(luò)。所有經(jīng)過計算機處理的數(shù)據(jù)都很容易收集，比如在瀏覽器中搜索、點擊、網(wǎng)購，其他數(shù)據(jù)(比如溫度、海水鹽度、地震波)都可以通過傳感器轉(zhuǎn)換成數(shù)字信號輸入計算機。一般來說，首先要對收集到的數(shù)據(jù)進行排序。常用的軟件:Tableau和Impress是綜合，Refine和牧馬人是不純的數(shù)據(jù)排序工具，Weka是用于數(shù)據(jù)挖掘的。

用于統(tǒng)計分析的R語言有一個擴展，RHadoop，可以在Hadoop集群上運行R代碼。更具體地說，搜索你自己，視覺輸出有很多工具。建議參考維基百科的“數(shù)據(jù)可視化”詞條，Tableau和不純都有可視化功能。r語言也可以畫圖，還有很多框架或控件可以用來實現(xiàn)網(wǎng)頁上的可視化輸出。