現(xiàn)如今都是信息社會(huì)，并且還倡導(dǎo)“大物移云”【包含大數(shù)據(jù)、物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、云計(jì)算】等新型技術(shù)來為人們的日常生活服務(wù)，于是乎信息技術(shù)【Information technology簡(jiǎn)稱IT技術(shù)】也就隨之也火熱起來啦,因此一大波的人投身于互聯(lián)網(wǎng)中，下來就給大家介紹一下如何學(xué)習(xí)IT課程，希望對(duì)大家有所幫助!以下是小編為你整理的大數(shù)據(jù)如何學(xué) ?

需要學(xué)習(xí)或者從事IT工作，剛開始肯定是一頭霧水，常人所理解的IT工作者肯定是一些程序員之類的角色，這里我想說你的理解有些偏差，并且即使是程序員也分好多種從事算法的、Web開發(fā)、C++客戶端研發(fā)等，還有好多細(xì)小的分類【下圖大致說一下我理解的IT有哪些方向吧，有點(diǎn)不全面，只是一個(gè)詮釋，如果作為一個(gè)新手我覺得可以去一些平臺(tái)論壇比如說zhi hu等里面會(huì)有許多專業(yè)人士針對(duì)某個(gè)問題進(jìn)行專業(yè)的詮釋，大家可以借鑒一下】 ?

一個(gè)人是不可能將所有的方向都學(xué)到的。只能從事一個(gè)大的研究方向然后再到某個(gè)高深的領(lǐng)域進(jìn)而再去擴(kuò)展自己的廣度或者繼續(xù)這個(gè)深度廣度深度的問題等著我們學(xué)習(xí)到一定程序再開始琢磨做決定吧!

如何具體的學(xué)習(xí)【以JavaWeb為例】： ?

【了解行業(yè)*技術(shù)，選購圖書】我覺得先看基礎(chǔ)語法書，了解一些大概，邊學(xué)習(xí)邊跟著操作【實(shí)現(xiàn)沒有界面的學(xué)籍管理等簡(jiǎn)單的系統(tǒng)】： ?

進(jìn)階高級(jí)：繼續(xù)看高階的書或者跟著視頻學(xué)習(xí)完成一些復(fù)雜的項(xiàng)目，比如說從事javaweb開發(fā)就得學(xué)習(xí)一些框架知識(shí)： ?

開始根據(jù)項(xiàng)目要求團(tuán)隊(duì)或者自行開始實(shí)施做項(xiàng)目【有一些網(wǎng)站平臺(tái)會(huì)提供一些需要做的項(xiàng)目，掛在平臺(tái)上】： ?

就這樣一步步的踏入行業(yè)高級(jí)水平中，實(shí)踐中慢慢成長(zhǎng)，結(jié)合自己的情況選擇廣度和深度 ?

? ?

數(shù)據(jù)分析例子 ?

Morton牛排店的品牌認(rèn)知。當(dāng)一位顧客開玩笑地通過推特向這家位于芝加哥的牛排連鎖店訂餐送到紐約Newark機(jī)場(chǎng)(他將在一天工作之后抵達(dá)該處)時(shí)，Morton就開始了自己的社交秀。首先，分析推特?cái)?shù)據(jù)，發(fā)現(xiàn)該顧客是本店的?？?，也是推特的常用者。根據(jù)客戶以往的訂單，推測(cè)出其所乘的航班，然后派出一位身著燕尾服的侍者為客戶提供晚餐。也許，這聽起來過于離奇，但是你必須審視自己：“我是否有能力做到這個(gè)程度?”Laney說。 ?

PredPol Inc.。PredPol公司通過與洛杉磯和圣克魯斯的警方以及一群研究人員合作，基于地震預(yù)測(cè)算法的變體和犯罪數(shù)據(jù)來預(yù)測(cè)犯罪發(fā)生的幾率，可以精確到500平方英尺的范圍內(nèi)。在洛杉磯運(yùn)用該算法的地區(qū)，盜竊罪和暴力犯罪分布下降了33%和21%。 Tesco PLC(特易購)和運(yùn)營效率。這家超市連鎖在其數(shù)據(jù)倉庫中收集了700萬部冰箱的數(shù)據(jù)。通過對(duì)這些數(shù)據(jù)的分析，進(jìn)行更全面的監(jiān)控并進(jìn)行主動(dòng)的維修以降低整體能耗。 ?

American Express(美國運(yùn)通，AmEx)和商業(yè)智能。以往，AmEx只能實(shí)現(xiàn)事后諸葛式的報(bào)告和滯后的預(yù)測(cè)?！皞鹘y(tǒng)的BI已經(jīng)無法滿足業(yè)務(wù)發(fā)展的需要?！盠aney認(rèn)為。于是，AmEx開始構(gòu)建真正能夠預(yù)測(cè)忠誠度的模型，基于歷史交易數(shù)據(jù)，用115個(gè)變量來進(jìn)行分析預(yù)測(cè)。該公司表示，對(duì)于澳大利亞將于之后四個(gè)月中流失的客戶，已經(jīng)能夠識(shí)別出其中的24%。 ?

Express Scripts Holding Co.的產(chǎn)品制造。該公司發(fā)現(xiàn)那些需要服藥的人常常也是最可能忘記服藥的人。因此，他們開發(fā)了一個(gè)新產(chǎn)品：會(huì)響鈴的藥品蓋和自動(dòng)的電話呼叫，以此提醒患者按時(shí)服藥。 ?

Infinity Property & Casualty Corp.的黑暗數(shù)據(jù)(dark data)。Laney對(duì)于黑暗數(shù)據(jù)的定義是，那些針對(duì)單一目標(biāo)而收集的數(shù)據(jù)，通常用過之后就被歸檔閑置，其真正價(jià)值未能被充分挖掘。在特定情況下，這些數(shù)據(jù)可以用作其他用途。該公司用累積的理賠師報(bào)告來分析欺詐案例，通過算法挽回了1200萬美元的代位追償金額。 ?

? ?

大數(shù)據(jù)分析的五個(gè)基本方面 ?

PredictiveAnalyticCapabilities(預(yù)測(cè)性分析能力) ?

數(shù)據(jù)挖掘可以讓分析員更好的理解數(shù)據(jù)，而預(yù)測(cè)性分析可以讓分析員根據(jù)可視化分析和數(shù)據(jù)挖掘的結(jié)果做出一些預(yù)測(cè)性的判斷。 ?

DataQualityandMasterDataManagement(數(shù)據(jù)質(zhì)量和數(shù)據(jù)管理)

?

數(shù)據(jù)質(zhì)量和數(shù)據(jù)管理是一些管理方面的*實(shí)踐。通過標(biāo)準(zhǔn)化的流程和工具對(duì)數(shù)據(jù)進(jìn)行處理可以保證一個(gè)預(yù)先定義好的高質(zhì)量的分析結(jié)果。 AnalyticVisualizations(可視化分析) ?

不管是對(duì)數(shù)據(jù)分析專家還是普通用戶，數(shù)據(jù)可視化是數(shù)據(jù)分析工具最基本的要求?？梢暬梢灾庇^的展示數(shù)據(jù)，讓數(shù)據(jù)自己說話，讓觀眾聽到結(jié)果。 SemanticEngines(語義引擎) ?

我們知道由于非結(jié)構(gòu)化數(shù)據(jù)的多樣性帶來了數(shù)據(jù)分析的新的挑戰(zhàn)，我們需要一系列的工具去解析，提取，分析數(shù)據(jù)。語義引擎需要被設(shè)計(jì)成能夠從“文檔”中智能提取信息。 ?

DataMiningAlgorithms(數(shù)據(jù)挖掘算法) ?

可視化是給人看的，數(shù)據(jù)挖掘就是給機(jī)器看的。集群、分割、孤立點(diǎn)分析還有其他的算法讓我們深入數(shù)據(jù)內(nèi)部，挖掘價(jià)值。這些算法不僅要處理大數(shù)據(jù)的量，也要處理大數(shù)據(jù)的速度。 ?

假如大數(shù)據(jù)真的是下一個(gè)重要的技術(shù)革新的話，我們*把精力關(guān)注在大數(shù)據(jù)能給我們帶來的好處，而不僅僅是挑戰(zhàn)。 ?

? ?

storm集群組件 ?

了解Storm集群組件的功能 ?

Storm集群中包含兩類節(jié)點(diǎn)：主控節(jié)點(diǎn)(Master Node)和工作節(jié)點(diǎn)(Work Node)。其分別對(duì)應(yīng)的角色如下： ?

主控節(jié)點(diǎn)(Master Node)上運(yùn)行一個(gè)被稱為Nimbus的后臺(tái)程序，它負(fù)責(zé)在Storm集群內(nèi)分發(fā)代碼，分配任務(wù)給工作機(jī)器，并且負(fù)責(zé)監(jiān)控集群運(yùn)行狀態(tài)。Nimbus的作用類似于Hadoop中JobTracker的角色。 ?

每個(gè)工作節(jié)點(diǎn)(Work Node)上運(yùn)行一個(gè)被稱為Supervisor的后臺(tái)程序。Supervisor負(fù)責(zé)監(jiān)聽從Nimbus分配給它執(zhí)行的任務(wù)，據(jù)此啟動(dòng)或停止執(zhí)行任務(wù)的工作進(jìn)程。每一個(gè)工作進(jìn)程執(zhí)行一個(gè)Topology的子集;一個(gè)運(yùn)行中的Topology由分布在不同工作節(jié)點(diǎn)上的多個(gè)工作進(jìn)程組成。 ?

Nimbus和Supervisor節(jié)點(diǎn)之間所有的協(xié)調(diào)工作是通過Zookeeper集群來實(shí)現(xiàn)的。此外，Nimbus和Supervisor進(jìn)程都是快速失敗(fail-fast)和無狀態(tài)(stateless)的;Storm集群所有的狀態(tài)要么在Zookeeper集群中，要么存儲(chǔ)在本地磁盤上。這意味著你可以用kill -9來殺死Nimbus和Supervisor進(jìn)程，它們?cè)谥貑⒑罂梢岳^續(xù)工作。這個(gè)設(shè)計(jì)使得Storm集群擁有不可思議的穩(wěn)定性。 ?