大數(shù)據(jù)是現(xiàn)在很多企業(yè)發(fā)展中必不可少的工具，它究竟對(duì)企業(yè)會(huì)有什么作用呢?從傳統(tǒng)企業(yè)的運(yùn)行流程來(lái)看，大數(shù)據(jù)主要能夠在了解用戶、鎖定資源、規(guī)劃生產(chǎn)、做好運(yùn)營(yíng)、開(kāi)展服務(wù)等方面，那么大數(shù)據(jù)在這些方面又是怎么做的呢?以下是小編為你整理的想學(xué)大數(shù)據(jù)怎么樣去學(xué) ?

客戶是企業(yè)重要的數(shù)據(jù)源，當(dāng)數(shù)量龐大的客戶處于同一個(gè)平臺(tái)上時(shí)，就會(huì)產(chǎn)生無(wú)數(shù)個(gè)數(shù)據(jù)源，而企業(yè)通過(guò)大數(shù)據(jù)的整合分析，對(duì)這些數(shù)據(jù)源進(jìn)行分析，探碼大數(shù)據(jù)客流分析通過(guò)對(duì)人群熱力指數(shù)計(jì)算潛力圖，競(jìng)品分布，大數(shù)據(jù)識(shí)別城市生活消費(fèi)功能區(qū)，用戶畫(huà)像反映出商場(chǎng)附近客流情況以及客流潛力。將會(huì)總結(jié)出一套新的規(guī)律，從而幫助企業(yè)了解客戶，為企業(yè)的確定更準(zhǔn)確的發(fā)展方向。

今天的客戶和以往有很大不同。大數(shù)據(jù)的興起使他們能夠在購(gòu)買(mǎi)一個(gè)產(chǎn)品之前徹底和孜孜不倦地研究它，并了解他們的消費(fèi)情況。通過(guò)運(yùn)用大數(shù)據(jù)，將客戶、用戶和產(chǎn)品進(jìn)行有機(jī)串聯(lián)，對(duì)用戶的產(chǎn)品偏好，客戶的關(guān)系偏好進(jìn)行個(gè)性化定位，生產(chǎn)出用戶驅(qū)動(dòng)型的產(chǎn)品，提供客戶導(dǎo)向性的服務(wù)。并從數(shù)據(jù)中發(fā)掘出適應(yīng)企業(yè)發(fā)展環(huán)境的社會(huì)和商業(yè)形態(tài)，用數(shù)據(jù)對(duì)用戶和客戶對(duì)待產(chǎn)品的態(tài)度，進(jìn)行挖掘和洞察，準(zhǔn)確發(fā)現(xiàn)并解讀客戶及用戶的諸多新需求和行為特征， ?

通過(guò)大數(shù)據(jù)技術(shù)，使企業(yè)在運(yùn)營(yíng)過(guò)程中，對(duì)運(yùn)營(yíng)所需資源的挖掘、具體情況和儲(chǔ)量分布等，企業(yè)都可以進(jìn)行搜集分析，形成基于企業(yè)的資源分布可視圖，就如同“電子地圖”一般，將各種優(yōu)勢(shì)點(diǎn)，進(jìn)行“點(diǎn)對(duì)點(diǎn)”的數(shù)據(jù)化、圖像化展現(xiàn)，讓企業(yè)的管理者可以更直觀地面對(duì)自己的企業(yè)，更好地利用各種已有和潛在資源。如果沒(méi)有大數(shù)據(jù)，將很難發(fā)現(xiàn)曾經(jīng)認(rèn)為是完全無(wú)關(guān)行為間的相互關(guān)聯(lián)性，就如同外媒曾經(jīng)提到的“啤酒”與“尿片”之間的關(guān)聯(lián)營(yíng)銷(xiāo)一樣，如果沒(méi)有大數(shù)據(jù)這將是一種幾乎不可能的事情。 ?

選擇模型/自定義模型 ?

基于業(yè)務(wù)基礎(chǔ)來(lái)決定選擇模型的形態(tài)，比如，如果要預(yù)測(cè)產(chǎn)品銷(xiāo)量，則可以選擇數(shù)值預(yù)測(cè)模型。(可采用回歸模型，時(shí)序預(yù)測(cè)) ?

之所以叫模型，因?yàn)槊總€(gè)模型大致的模式是固定的，但其中還會(huì)有一些不確定的變量在里面，這樣模型才會(huì)有通用性，而訓(xùn)練模型的意思就是找到最合適的參數(shù)，一旦找到*參數(shù)，模型就基本可用了! ?

也即是字面意思，但一個(gè)模型的好壞是需要放在其特定的業(yè)務(wù)場(chǎng)景下來(lái)評(píng)估的。 ?

評(píng)價(jià)模型質(zhì)量的常用指標(biāo)有：平均誤差率、判定系數(shù)R2 ?

評(píng)估分類(lèi)預(yù)測(cè)模型質(zhì)量的常用指標(biāo)(如下圖所示)：正確率、查全率、查準(zhǔn)率、ROC曲線和AUC值等 ?

第四步：應(yīng)用模型 ?

評(píng)估測(cè)量完成后，就要將此模型應(yīng)用于業(yè)務(wù)基礎(chǔ)的實(shí)踐中去，用于解決工作中的業(yè)務(wù)問(wèn)題的，比如預(yù)測(cè)客戶行為，比如劃分客戶群。 ?

第五步：優(yōu)化模型，一般發(fā)生在兩種情況下： ?

1.在評(píng)估模型中，如果發(fā)現(xiàn)模型欠擬合，或者過(guò)擬合，說(shuō)明這個(gè)模型待優(yōu)化; ?

2.在真實(shí)應(yīng)用場(chǎng)景中，定期進(jìn)行優(yōu)化，或者當(dāng)發(fā)現(xiàn)模型在真實(shí)的業(yè)務(wù)場(chǎng)景中效果不好時(shí)，也要啟動(dòng)優(yōu)化; ?

數(shù)據(jù)存儲(chǔ)層 ?

數(shù)據(jù)存儲(chǔ)層主要用于數(shù)據(jù)的存儲(chǔ)。目前采用MongoDB存儲(chǔ)結(jié)果數(shù)。 ?

通過(guò)Storm處理后的數(shù)據(jù)，首先緩存到Redis中，每隔一定得時(shí)間間隔，將數(shù)據(jù)批量轉(zhuǎn)存到MongoDB中。 ?

MongoDB是一個(gè)高性能、易部署、易使用的分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)，介于結(jié)構(gòu)化數(shù)據(jù)庫(kù)和非結(jié)構(gòu)化數(shù)據(jù)庫(kù)之間，數(shù)據(jù)存儲(chǔ)格式不固定，可以非常方便的進(jìn)行擴(kuò)充。

?

04數(shù)據(jù)處理層 ?

數(shù)據(jù)處理層主要采集一些數(shù)據(jù)挖掘算法對(duì)數(shù)據(jù)進(jìn)行挖掘，或者進(jìn)行實(shí)時(shí)計(jì)算。 ?

數(shù)據(jù)挖掘主要借助于統(tǒng)計(jì)學(xué)方法、機(jī)器學(xué)習(xí)方法、神經(jīng)網(wǎng)絡(luò)方法等對(duì)數(shù)據(jù)進(jìn)行知識(shí)挖掘，發(fā)掘潛在的價(jià)值。 ?

比如利用線性回歸算法，預(yù)測(cè)車(chē)輛的停留時(shí)間。利用k-means算法對(duì)位置臨近的出租車(chē)做聚類(lèi)分析，從而發(fā)現(xiàn)最有可能搭載乘客的熱點(diǎn)區(qū)域。根據(jù)速度將軌跡數(shù)據(jù)進(jìn)行分段，從而分析某個(gè)時(shí)間段的道路暢通狀況等。 ?

數(shù)據(jù)分析層 ?

數(shù)據(jù)分析層主要是數(shù)據(jù)的展示和分析。 ?

比如將GPS數(shù)據(jù)加載到地圖上，利用抓路算法將GPS數(shù)據(jù)和地圖數(shù)據(jù)進(jìn)行融合，對(duì)分段的軌跡進(jìn)行不同顏色的顯示，可以讓調(diào)度人員對(duì)當(dāng)前時(shí)間段的道路通行情況一目了然，輔助車(chē)輛的調(diào)度。 ?

我秀*不斷提高自身數(shù)據(jù)處理能力，就是為了給您提供更快速、更精準(zhǔn)、更豐富的數(shù)據(jù)分析功能。 ?

利用消費(fèi)記錄來(lái)進(jìn)行評(píng)分 ?

大會(huì)數(shù)據(jù)風(fēng)控除了可以識(shí)別出壞人，還可以評(píng)估貸款人的還款能力。過(guò)去傳統(tǒng)金融依據(jù)借款人的收入來(lái)判斷其還款能力，但是有些客戶擁有工資以外的收入，例如投資收入、顧問(wèn)咨詢收入等。另外一些客戶可能從父母、伴侶、朋友那里獲得其他的財(cái)政支持，擁有較高的支付能力。 ?

按照傳統(tǒng)金融的做法，在家不工作照顧家庭的主婦可能還款能力較弱。無(wú)法給其提供貸款，但是其丈夫收入很高，家庭日常支出由其太太做主。這種情況，就需要消費(fèi)數(shù)據(jù)來(lái)證明其還款能力了。 ?

常用的消費(fèi)記錄由銀行卡消費(fèi)、電商購(gòu)物、公共事業(yè)費(fèi)記錄、大宗商品消費(fèi)等。還可以參考航空記錄、手機(jī)話費(fèi)、特殊會(huì)員消費(fèi)等方式。例如頭等艙乘坐次數(shù)，物業(yè)費(fèi)高低、高爾夫球俱樂(lè)部消費(fèi)，游艇俱樂(lè)部會(huì)員費(fèi)用，奢侈品會(huì)員，豪車(chē)4S店消費(fèi)記錄等消費(fèi)數(shù)據(jù)可以作為其信用評(píng)分重要參考。 ?

互聯(lián)網(wǎng)金融的主要客戶是屌絲，其電商消費(fèi)記錄、旅游消費(fèi)記錄、以及加油消費(fèi)記錄都可以作為評(píng)估其信用的依據(jù)。有的互聯(lián)金融公司專(zhuān)門(mén)從事個(gè)人電商消費(fèi)數(shù)據(jù)分析，只要客戶授權(quán)其登陸電商網(wǎng)站，其可以借助于工具將客戶歷史消費(fèi)數(shù)據(jù)全部抓取并進(jìn)行匯總和評(píng)分。 ?