大數(shù)據(jù)分析挖掘技術(shù)及其決策應(yīng)用研究

文/彭秦晉

大數(shù)據(jù)時代推動了各領(lǐng)域的快速發(fā)展，在發(fā)展過程中會形成海量數(shù)據(jù)，對這些數(shù)據(jù)加以分析非常重要，能夠有效促進(jìn)各行業(yè)的快速發(fā)展，大數(shù)據(jù)分析技術(shù)主要是對各領(lǐng)域的數(shù)據(jù)進(jìn)行收集及存儲，根據(jù)各行業(yè)的發(fā)展需求，對這些數(shù)據(jù)進(jìn)行科學(xué)有效的分析，從而提高數(shù)據(jù)價值，提高對數(shù)據(jù)的利用率，是行業(yè)進(jìn)一步發(fā)展的需要，通過數(shù)據(jù)挖掘可以在海量數(shù)據(jù)中快速的篩選出具有價值的數(shù)據(jù)，在各領(lǐng)域的發(fā)展進(jìn)程中發(fā)揮信息技術(shù)的重要作用，當(dāng)前的數(shù)據(jù)分析通常應(yīng)用數(shù)據(jù)挖掘技術(shù)，在具體的領(lǐng)域中采用的數(shù)據(jù)分析，通常會與一些算法相互結(jié)合，例如在生物學(xué)領(lǐng)域會與遺傳算法進(jìn)行結(jié)合，可以在很大程度上提高數(shù)據(jù)挖掘的效率，確保數(shù)據(jù)的科學(xué)性、完整性及準(zhǔn)確性，大數(shù)據(jù)分析有效的方法之一就是數(shù)據(jù)挖掘，可以有效提高信息技術(shù)應(yīng)用于數(shù)據(jù)挖掘的重要作用。

1 簡析數(shù)據(jù)分析方法

在大數(shù)據(jù)時的數(shù)據(jù)復(fù)雜、豐富多樣并且數(shù)量龐大，對其分析難度較大，在互聯(lián)網(wǎng)時代，企業(yè)也獲得了很大的發(fā)展，在此過程中數(shù)據(jù)的生成量巨大，必須對這些數(shù)據(jù)采用科學(xué)的方法進(jìn)行分析，確保數(shù)據(jù)分析的科學(xué)性、準(zhǔn)確性，從而提高數(shù)據(jù)利用率，充分發(fā)揮數(shù)據(jù)價值，促進(jìn)企業(yè)進(jìn)一步發(fā)展。大數(shù)據(jù)分析主要包括數(shù)據(jù)容量，數(shù)據(jù)格式及數(shù)據(jù)速率三方面，大數(shù)據(jù)分析的方式諸多，必須根據(jù)具體的數(shù)據(jù)類型，選擇合理的、科學(xué)的分析方法，對實現(xiàn)數(shù)據(jù)分析的高效性具有重要作用，HDFS是指分布式文件系統(tǒng)，主要應(yīng)用于存儲容量大的數(shù)據(jù)，目前企業(yè)發(fā)展過程中形成數(shù)據(jù)容量大，傳統(tǒng)數(shù)據(jù)存儲形式對現(xiàn)代數(shù)據(jù)存儲已經(jīng)不適用，目前數(shù)據(jù)存儲方法廣泛采用云存儲方式，云存儲具有容量大的特點，能夠滿足現(xiàn)代數(shù)據(jù)存儲的需要。HDFS主要組成由客戶端模塊、數(shù)據(jù)儲存模塊及原數(shù)據(jù)管理模塊三部分組成，其應(yīng)用廣泛，主要應(yīng)用于商業(yè)化硬件設(shè)備中，具有穩(wěn)定性高、出錯率低的優(yōu)勢。HDFS在商業(yè)群體的應(yīng)用中為數(shù)據(jù)的安全性提供了可靠的保障，在商業(yè)中涉及的很多數(shù)據(jù)都具有保密性，因此提高數(shù)據(jù)的安全性能對于企業(yè)而言非常重要，能夠滿足現(xiàn)代化數(shù)據(jù)分析的需求。HTTP指的是分布式計算，主要是確保程序接口的穩(wěn)定性及可靠性并提供數(shù)據(jù)運(yùn)動。分布式文件系統(tǒng)，主要應(yīng)用于出錯率較高的群體，其通常采用的處理方法是繼續(xù)運(yùn)用，從而可以確保數(shù)據(jù)的連續(xù)性。分布式計算式計算器計算方法中比較常見的一種方式，能夠確保計算的高效性及準(zhǔn)確性，是現(xiàn)代大數(shù)據(jù)分析中廣泛應(yīng)用的計算方式，能夠有效減少用戶對設(shè)備的維修及維護(hù)費用，從而提高用戶的經(jīng)濟(jì)效益。大數(shù)據(jù)分析中產(chǎn)生的設(shè)備維修及維護(hù)非常常見，大數(shù)據(jù)分析必須依賴現(xiàn)代設(shè)備的應(yīng)用，數(shù)據(jù)分析必須有計算機(jī)硬件的支撐，這些都是進(jìn)行大數(shù)據(jù)分析的根本，分布式計算的應(yīng)用可以有效減少用戶的設(shè)備維修維護(hù)費用的投入，所以分布式計算廣泛應(yīng)用于大數(shù)據(jù)分析中。

2 簡析數(shù)據(jù)挖掘的方法

數(shù)據(jù)分析中普遍應(yīng)用數(shù)據(jù)挖掘技術(shù)，在海量數(shù)據(jù)中篩選具有利用價值的數(shù)據(jù)，不僅可以分析具有規(guī)律性的數(shù)據(jù)，也可以分析無規(guī)律的數(shù)據(jù)，計算機(jī)等各大領(lǐng)域普遍應(yīng)用數(shù)據(jù)挖掘技術(shù)對數(shù)據(jù)進(jìn)行提煉，從而充分發(fā)揮數(shù)據(jù)價值，數(shù)據(jù)挖掘的方式有很多類型，用戶可以根據(jù)需要的數(shù)據(jù)分析選擇合理的挖掘方式，也可以采用多種數(shù)據(jù)結(jié)合的方法進(jìn)行數(shù)據(jù)挖掘，可以將各種數(shù)據(jù)挖掘的優(yōu)點進(jìn)行結(jié)合，數(shù)據(jù)挖掘方法包括分類法、Web數(shù)據(jù)挖掘法及回歸分析法這三種，每種數(shù)據(jù)挖掘方式都具有自身的優(yōu)勢，用戶必須根據(jù)實際的數(shù)據(jù)分析的需求對數(shù)據(jù)挖掘方式合理的選擇。分類法是指根據(jù)大量數(shù)據(jù)的不同特點進(jìn)行分類，將不同性質(zhì)的數(shù)據(jù)分成不同的種類，從而把數(shù)據(jù)庫中的具有不同特點的數(shù)據(jù)分類到指定的規(guī)定類型中，在需要利用數(shù)據(jù)時方便數(shù)據(jù)的調(diào)取，例如，現(xiàn)在的淘寶店店主普遍使用這種方法對用戶的購買記錄進(jìn)行分類，從而可以準(zhǔn)確的向用戶推薦合適的商品，達(dá)到提高店鋪銷量的目的。分類法主要應(yīng)用于具有規(guī)律性的數(shù)據(jù)中，這種類型的數(shù)據(jù)分類比較容易，采取分類法可以更好的實現(xiàn)數(shù)據(jù)挖掘的效果。回歸分析法可以將海量數(shù)據(jù)的數(shù)據(jù)信息的特性展現(xiàn)出來，并且通過函數(shù)將相關(guān)數(shù)據(jù)的不同聯(lián)系進(jìn)行表達(dá)以及數(shù)據(jù)信息的特性，這種分析方法通常應(yīng)用于挖掘數(shù)據(jù)的預(yù)測及數(shù)據(jù)之間的關(guān)聯(lián)。回歸分析法通常應(yīng)用于具有一定關(guān)聯(lián)的數(shù)據(jù)之間，通過科學(xué)的方法對數(shù)據(jù)進(jìn)行有效挖掘，可以找出數(shù)據(jù)的特征，實現(xiàn)數(shù)據(jù)挖掘的科學(xué)性、有效性，從而實現(xiàn)數(shù)據(jù)挖掘的高效性。

3 大數(shù)據(jù)挖掘技術(shù)的決策分析應(yīng)用

3.1 應(yīng)用于高校學(xué)生管理中

大數(shù)據(jù)挖掘技術(shù)應(yīng)用范圍廣闊，不但在企業(yè)財務(wù)系統(tǒng)及交通運(yùn)輸系統(tǒng)有用于有所應(yīng)用，在高校的教學(xué)管理中也具有重要作用，近年來國家對高等教育事業(yè)高度關(guān)注，為大學(xué)生的學(xué)習(xí)成長及個人未來發(fā)展都創(chuàng)造了良好的環(huán)境，大學(xué)生的學(xué)習(xí)和生活都比較輕松自由，這也增加了高校的學(xué)生管理工作的難度，目前我國大多數(shù)高校都建設(shè)了“一卡通”的學(xué)生管理系統(tǒng)，通過一卡通可以完成學(xué)生上課簽到、住宿、飲食及門禁的數(shù)據(jù)傳輸，所以可以通過應(yīng)用數(shù)據(jù)挖掘技術(shù)對“一卡通”進(jìn)行進(jìn)一步的延伸與發(fā)展，建立起高等院校網(wǎng)絡(luò)數(shù)據(jù)中心的數(shù)據(jù)交換平臺，可以提高高校學(xué)生管理工作的效率。比如，可以通過大數(shù)據(jù)交換平臺挖掘分析大學(xué)生群體的消費數(shù)據(jù)、校園上網(wǎng)數(shù)據(jù)、簽到數(shù)據(jù)及出入寢室門禁的數(shù)據(jù)，并且通過校內(nèi)的其他管理系統(tǒng)對相關(guān)數(shù)據(jù)進(jìn)行聯(lián)合抽取，從而建立起數(shù)據(jù)分析的預(yù)警模式，為這些數(shù)據(jù)定期的進(jìn)行整理合并，從而有效的管理學(xué)生在校內(nèi)的行動軌跡，可以很好的預(yù)防并及時地發(fā)現(xiàn)學(xué)生的失聯(lián)現(xiàn)象，當(dāng)數(shù)據(jù)系統(tǒng)對超出缺省值的信息進(jìn)行預(yù)警時，可以及時的通過短信或電子郵件的多種方式傳遞給輔導(dǎo)員，并且在校內(nèi)的學(xué)工系統(tǒng)中進(jìn)行備案，可以歸納及整理學(xué)生失聯(lián)問題的相關(guān)因素，可以為輔導(dǎo)員對學(xué)生動向的分析提供科學(xué)有效的依據(jù)，也可以充分的發(fā)揮預(yù)警性能，可以提高高效管理的效率及可靠性。

3.2 應(yīng)用于財務(wù)系統(tǒng)決策中

大數(shù)據(jù)挖掘技術(shù)對財務(wù)系統(tǒng)的決策具有重要作用，目前的企業(yè)財務(wù)管理實現(xiàn)會計信息化，當(dāng)前財務(wù)的基本工作都是在財務(wù)軟件上完成，目前財務(wù)會計已經(jīng)開始向管理會計進(jìn)行轉(zhuǎn)型，這是必然的趨勢，是社會的不斷發(fā)展中對企業(yè)財務(wù)管理的新要求，在財務(wù)系統(tǒng)應(yīng)用大數(shù)據(jù)挖掘技術(shù)，在一定程度上提高了管理會計在企業(yè)財務(wù)方面的分析能力，對企業(yè)發(fā)展的重要決策具有重要的影響作用，比如說，在投資管理時可以通過數(shù)據(jù)挖掘技術(shù)對投資的外部環(huán)境及市場需求進(jìn)行分析，可以對投資風(fēng)險因素進(jìn)行最大限度的識別，可以實現(xiàn)最大化的經(jīng)濟(jì)效益。籌資決策階段，通過數(shù)據(jù)挖掘技術(shù)，對籌資的數(shù)據(jù)及導(dǎo)向進(jìn)行研究分析，能夠加強(qiáng)籌資的目的性，選擇與籌資需求相契合的方式，從而最大程度的降低投資成本。企業(yè)的重要管理部門之一就是財務(wù)部門，在企業(yè)的發(fā)展與決策中都具有重要作用，大數(shù)據(jù)挖掘技術(shù)應(yīng)用于財務(wù)系統(tǒng)可以很大程度的提高財務(wù)人員的分析能力，能夠滿足現(xiàn)代企業(yè)財務(wù)管理高速發(fā)展的需求，也是社會不斷發(fā)展中，對現(xiàn)在企業(yè)財務(wù)管理的新要求。

3.3 應(yīng)用于商場管理的

3.3.1 簡析客戶細(xì)分

客戶細(xì)分指的是通過數(shù)據(jù)挖掘技術(shù)，根據(jù)商場消費群體的特定標(biāo)準(zhǔn)將其劃分成不同的類型，每種類型的群體的消費習(xí)慣都相似，分類的參考標(biāo)準(zhǔn)主要是年齡、愛好、職業(yè)等，進(jìn)行客戶分類的主要目的是對客戶的消費信息的全面掌握，同時對客戶的消費習(xí)慣進(jìn)行分析，找出客戶群體的特性，從而實現(xiàn)價值客戶的有效挖掘，可以制定具有針對性的銷售策略，從而提高營銷的效率。傳統(tǒng)營銷方式大多數(shù)都是通過派發(fā)傳單對產(chǎn)品進(jìn)行宣傳，這種傳統(tǒng)的宣傳方式具有命中率低的劣勢，目前無法滿足營銷需求。因此商場構(gòu)建了具有針對性的數(shù)據(jù)挖掘系統(tǒng)，通過會員制的方法對客戶信息進(jìn)行采集，可以收集整理客戶每次的消費內(nèi)容，然后通過數(shù)據(jù)挖掘技術(shù)，對這些數(shù)據(jù)進(jìn)行分析歸納，從而總結(jié)出這些消費群體的特征，然后按照消費喜好，在這些特定群體內(nèi)推送輔精準(zhǔn)內(nèi)容，這種營銷方式具有個性化的優(yōu)勢，在滿足客戶不同需求的同時，也實現(xiàn)了商場的人性化服務(wù)，可以提高商場的競爭能力，吸引更多的消費者。商場通常都采用會員制的式，推薦客戶辦理會員卡，對自己的信息進(jìn)行登記可以憑借會員卡獲得折扣，在每次的消費結(jié)賬時，在會員賬號中對這些數(shù)據(jù)信息進(jìn)行匯總，當(dāng)達(dá)到一定的數(shù)量時，商場就會通過數(shù)據(jù)挖掘技術(shù)，對這些數(shù)據(jù)進(jìn)行針對性的分析，通過進(jìn)一步的總結(jié)，對客戶進(jìn)行細(xì)化，然后在以后的經(jīng)營中，商場就會對這些特定的消費群體，定期發(fā)送與更精準(zhǔn)的內(nèi)容，這樣就可以實現(xiàn)營銷活動的針對性，可以吸引大量消費者前來購物。

3.3.2 對客戶信用進(jìn)行分析

還可以在用戶信息分析中應(yīng)用挖掘技術(shù)，通過分析大量的歷史數(shù)據(jù)，從而總結(jié)出客戶的信用等級，根據(jù)這些信息采取具有針對性的營銷方案，可以減少欺詐現(xiàn)象的發(fā)生。這項技術(shù)的應(yīng)用能夠在很大程度上降低投資風(fēng)險，同時針對高信用的用戶，提供更多便捷優(yōu)惠服務(wù)，可以吸引客戶及增加消費者的依賴性。人們的生活質(zhì)量越來越高，消費水平也發(fā)生了翻天覆地的變化，大型商場的主要收益來源就是大型家電及高昂消費品的銷售，為了吸引更多的客戶，部分商品可以使用分期付款的方式，消費者只需繳納首付，然后按月結(jié)算，就可以提前擁有商品。在增加銷售量的同時，也可以為消費者提供人性化的服務(wù)，可以充分的發(fā)揮客戶信息分析中應(yīng)用數(shù)據(jù)挖掘技術(shù)的作用，是商場制定營銷策略的基本依據(jù)，如果客戶的信用度低，就可以拒絕提供分期服務(wù)，從而降低銷售風(fēng)險。

3.3.3 簡析客戶識別與保留

還可以在客戶識別及保留中應(yīng)用數(shù)據(jù)挖掘技術(shù)，在大型商場管理中，潛在價值客戶流失的現(xiàn)象很常見，可以通過應(yīng)用數(shù)據(jù)挖掘技術(shù)分析出孤立點，通過建立特定模型展開數(shù)據(jù)分析，對有流失傾向的價值客戶快速定位，利于及時采取措施挽留客戶?？偟膩碚f，數(shù)據(jù)挖掘技術(shù)應(yīng)用于客戶識別及保留的主要內(nèi)容如下，

（1）識別潛在用戶，通過識別潛在用戶，可以挖掘價值消費者，吸引更多的客戶，在實踐應(yīng)用過程中，通常是在數(shù)據(jù)庫中進(jìn)行分析比對，構(gòu)建模糊概念及集合，然后根據(jù)測試樣本對數(shù)據(jù)進(jìn)行比較，就可以模擬消費者未來行為。比如商場對特定的消費群體發(fā)放宣傳冊，然后通過數(shù)據(jù)庫對這些新顧客進(jìn)行分類，對顧客后續(xù)的消費進(jìn)行判斷，并且根據(jù)這些總結(jié)，決定是否對其繼續(xù)發(fā)放宣傳手冊。

（2）保留顧客是對以前客戶的識別，是提高銷售量的重要方法之一。除此之外，商場必須采取對策保留老顧客，要有效的防止老顧客流失。根據(jù)相關(guān)數(shù)據(jù)分析可知，保留老顧客的成本投入遠(yuǎn)低于獲取新顧客的投入成本。因此，應(yīng)用數(shù)據(jù)挖掘技術(shù)對這些數(shù)據(jù)進(jìn)行具有針對性的分析，首先分析顧客流失原因。比如，在特定的時間段商場顧客數(shù)量明顯減少時，通過收集數(shù)據(jù)進(jìn)行分析，并總結(jié)流失原因，然后根據(jù)這些原因采取對策挽留顧客，還可以完善服務(wù)，為顧客提供更便捷人性化的服務(wù)，從而提高消費者的忠誠度，可以有效的實現(xiàn)防止客戶流失的目標(biāo)。

（3）分析客戶的忠誠度對商場經(jīng)營具有很大的影響作用，應(yīng)用數(shù)據(jù)挖掘技術(shù)可以對客戶的忠誠度進(jìn)行有效分析，通常是對購物的穩(wěn)定性、牢固性、持久性進(jìn)行分析。比如，實際應(yīng)用中商場對客戶的相關(guān)會員信息進(jìn)行分析，包括消費金額、消費的頻率以及近期的消費時間的分析，將這些數(shù)據(jù)導(dǎo)入模型就可以預(yù)測出忠誠度的變化幅度，商場可以根據(jù)這些數(shù)據(jù)，對銷售策略進(jìn)行調(diào)整，比如商品的價格及種類調(diào)整，如此不但可以保留老顧客，提高忠誠度同時也可以吸引更多新客源，分析客戶盈利能力。商場應(yīng)用數(shù)據(jù)挖掘技術(shù)完善其商業(yè)模式通過模型化的分析，做出科學(xué)決策，當(dāng)前數(shù)據(jù)挖掘技術(shù)是新型的商業(yè)信息技術(shù)，其效果明顯，但是還需要不斷的創(chuàng)新及研發(fā)。就能夠通過現(xiàn)代化信息技術(shù)對大型商場的管理進(jìn)行完善，客戶的識別保留、忠誠度分析以及盈利能力的分析都是比較常見的方法。商場在后期的發(fā)展，還要根據(jù)自身的需求，開發(fā)具有針對性的應(yīng)用，當(dāng)然在應(yīng)用的初級階段，出現(xiàn)的問題較多，就需要進(jìn)一步的改善，不僅要繼續(xù)擴(kuò)展挖掘數(shù)據(jù)挖掘技術(shù)的應(yīng)用，同時能夠有效提高企業(yè)發(fā)展。

4 結(jié)束語

綜合而言，在信息化快速發(fā)展的時代，大數(shù)據(jù)挖掘技術(shù)及分析技術(shù)，在各領(lǐng)域都具有重要的作用，能夠為用戶提供精準(zhǔn)的、具有價值的數(shù)據(jù)參考，從而為用戶的科學(xué)決策提供理論依據(jù)，通過信息化技術(shù)及大數(shù)據(jù)技術(shù)的應(yīng)用，提供更便捷人性化的服務(wù)。