推薦一個(gè)大數(shù)據(jù)分析學(xué)習(xí)路線(xiàn),在找相應(yīng)的論壇或者社區(qū)
一、大數(shù)據(jù)分析的五個(gè)基本方面
1、可視化分析
大數(shù)據(jù)分析的使用者有大數(shù)據(jù)分析專(zhuān)家,同時(shí)還有普通用戶(hù),但是他們二者對(duì)于大數(shù)據(jù)分析最基本的要求就是可視化分析,因?yàn)榭梢暬治瞿軌蛑庇^(guān)的呈現(xiàn)大數(shù)據(jù)特點(diǎn),同時(shí)能夠非常容易被讀者所接受,就如同看圖說(shuō)話(huà)一樣簡(jiǎn)單明了。
2、數(shù)據(jù)挖掘算法
大數(shù)據(jù)分析的理論核心就是數(shù)據(jù)挖掘算法,各種數(shù)據(jù)挖掘的算法基于不同的數(shù)據(jù)類(lèi)型和格式才能更加科學(xué)的呈現(xiàn)出數(shù)據(jù)本身具備的特點(diǎn),也正是因?yàn)檫@些被全世界統(tǒng)計(jì)學(xué)家所公認(rèn)的各種統(tǒng)計(jì)方法(可以稱(chēng)之為真理)才能深入數(shù)據(jù)內(nèi)部,挖掘出公認(rèn)的價(jià)值。另外一個(gè)方面也是因?yàn)橛羞@些數(shù)據(jù)挖掘的算法才能更快速的處理大數(shù)據(jù),如果一個(gè)算法得花上好幾年才能得出結(jié)論,那大數(shù)據(jù)的價(jià)值也就無(wú)從說(shuō)起了。
3、預(yù)測(cè)性分析能力
大數(shù)據(jù)分析最終要的應(yīng)用領(lǐng)域之一就是預(yù)測(cè)性分析,從大數(shù)據(jù)中挖掘出特點(diǎn),通過(guò)科學(xué)的建立模型,之后便可以通過(guò)模型帶入新的數(shù)據(jù),從而預(yù)測(cè)未來(lái)的數(shù)據(jù)。
4、語(yǔ)義引擎
大數(shù)據(jù)分析廣泛應(yīng)用于網(wǎng)絡(luò)數(shù)據(jù)挖掘,可從用戶(hù)的搜索關(guān)鍵詞、標(biāo)簽關(guān)鍵詞、或其他輸入語(yǔ)義,分析,判斷用戶(hù)需求,從而實(shí)現(xiàn)更好的用戶(hù)體驗(yàn)和廣告匹配。
5、數(shù)據(jù)質(zhì)量和數(shù)據(jù)管理
大數(shù)據(jù)分析離不開(kāi)數(shù)據(jù)質(zhì)量和數(shù)據(jù)管理,高質(zhì)量的數(shù)據(jù)和有效的數(shù)據(jù)管理,無(wú)論是在學(xué)術(shù)研究還是在商業(yè)應(yīng)用領(lǐng)域,都能夠保證分析結(jié)果的真實(shí)和有價(jià)值。大數(shù)據(jù)分析的基礎(chǔ)就是以上五個(gè)方面,當(dāng)然更加深入大數(shù)據(jù)分析的話(huà),還有很多很多更加有特點(diǎn)的、更加深入的、更加專(zhuān)業(yè)的大數(shù)據(jù)分析方法。
二、如何選擇適合的數(shù)據(jù)分析工具
要明白分析什么數(shù)據(jù),大數(shù)據(jù)要分析的數(shù)據(jù)類(lèi)型主要有四大類(lèi):
1、交易數(shù)據(jù)(TRANSACTIONDATA)
大數(shù)據(jù)平臺(tái)能夠獲取時(shí)間跨度更大、更海量的結(jié)構(gòu)化交易數(shù)據(jù),這樣就可以對(duì)更廣泛的交易數(shù)據(jù)類(lèi)型進(jìn)行分析,不僅僅包括POS或電子商務(wù)購(gòu)物數(shù)據(jù),還包括行為交易數(shù)據(jù),例如Web服務(wù)器記錄的互聯(lián)網(wǎng)點(diǎn)擊流數(shù)據(jù)日志。
2、人為數(shù)據(jù)(HUMAN-GENERATEDDATA)
非結(jié)構(gòu)數(shù)據(jù)廣泛存在于電子郵件、文檔、圖片、音頻、視頻,以及通過(guò)博客、維基,尤其是社交媒體產(chǎn)生的數(shù)據(jù)流。這些數(shù)據(jù)為使用文本分析功能進(jìn)行分析提供了豐富的數(shù)據(jù)源泉。
3、移動(dòng)數(shù)據(jù)(MOBILEDATA)
能夠上網(wǎng)的智能手機(jī)和平板越來(lái)越普遍。這些移動(dòng)設(shè)備上的App都能夠追蹤和溝通無(wú)數(shù)事件,從App內(nèi)的交易數(shù)據(jù)(如搜索產(chǎn)品的記錄事件)到個(gè)人信息資料或狀態(tài)報(bào)告事件(如地點(diǎn)變更即報(bào)告一個(gè)新的地理編碼)。
4、機(jī)器和傳感器數(shù)據(jù)(MACHINEANDSENSORDATA)
器、工廠(chǎng)機(jī)器和連接互聯(lián)網(wǎng)的家用電器。這些設(shè)備可以配置為與互聯(lián)網(wǎng)絡(luò)中的其他節(jié)點(diǎn)通信,還可以自動(dòng)向中央服務(wù)器傳輸數(shù)據(jù),這樣就可以對(duì)數(shù)據(jù)進(jìn)行分析。機(jī)器和傳感器數(shù)據(jù)是來(lái)自新興的物聯(lián)網(wǎng)(IoT)所產(chǎn)生的主要例子。來(lái)自物聯(lián)網(wǎng)的數(shù)據(jù)可以用于構(gòu)建分析模型,連續(xù)監(jiān)測(cè)預(yù)測(cè)性行為(如當(dāng)傳感器值表示有問(wèn)題時(shí)進(jìn)行識(shí)別),提供規(guī)定的指令(如警示技術(shù)人員在真正出問(wèn)題之前檢查設(shè)備)。內(nèi)容來(lái)自數(shù)據(jù)分析師CPDA