大數(shù)據(jù)時(shí)代統(tǒng)計(jì)學(xué)面臨的機(jī)遇與挑戰(zhàn)探析

董安琪 對外經(jīng)濟(jì)貿(mào)易大學(xué)統(tǒng)計(jì)學(xué)院在職人員高級(jí)課程研修班學(xué)員

引言：大數(shù)據(jù)技術(shù)是互聯(lián)網(wǎng)技術(shù)在科學(xué)技術(shù)體系優(yōu)化變革之下衍生出的一種新興產(chǎn)業(yè)技術(shù)。大數(shù)據(jù)技術(shù)是為滿足互聯(lián)網(wǎng)背景下大量的數(shù)據(jù)的處理工作，一方面幫助互聯(lián)網(wǎng)解決數(shù)據(jù)庫的整合、分析等相關(guān)工作，為技術(shù)人員帶來一定的便利；另一方面數(shù)據(jù)的處理少不了統(tǒng)計(jì)學(xué)的專業(yè)知識(shí)，而大數(shù)據(jù)背景下，處理數(shù)據(jù)的工作需求太過龐大，刺激統(tǒng)計(jì)學(xué)專業(yè)的技術(shù)革新與發(fā)展，由此觀之，大數(shù)據(jù)時(shí)代的到來對統(tǒng)計(jì)學(xué)專業(yè)來講既是可遇不可求的發(fā)展機(jī)遇，也是難以解決的巨大挑戰(zhàn)。對統(tǒng)計(jì)學(xué)的相關(guān)技術(shù)如現(xiàn)用的統(tǒng)計(jì)與計(jì)算模式等創(chuàng)新優(yōu)化迫在眉睫。本文筆者分別從機(jī)遇以及挑戰(zhàn)兩個(gè)角度對大數(shù)據(jù)下的統(tǒng)計(jì)學(xué)進(jìn)行闡述，意在拋磚引玉，吸引各專業(yè)人才共同討論對統(tǒng)計(jì)學(xué)專業(yè)的未來展望。

一、有關(guān)大數(shù)據(jù)時(shí)代為統(tǒng)計(jì)學(xué)專業(yè)提供的機(jī)遇及其相關(guān)內(nèi)容的相關(guān)闡述

（一）統(tǒng)計(jì)效率相關(guān)問題的簡單闡述

大數(shù)據(jù)時(shí)代不斷推進(jìn)過程中，采集數(shù)據(jù)以及信息的工作相較傳統(tǒng)的統(tǒng)計(jì)學(xué)專業(yè)的相關(guān)知識(shí)更加節(jié)省成本，雖然采集的次數(shù)有所提高，但是大數(shù)據(jù)技術(shù)可以充分且全面的挖掘整體的潛在價(jià)值，而且能夠提升統(tǒng)計(jì)動(dòng)態(tài)數(shù)據(jù)的收集數(shù)量，進(jìn)而達(dá)到效率提高的目的。不僅如此大數(shù)據(jù)的技術(shù)還可以幫助統(tǒng)計(jì)能夠在應(yīng)用中滿足不同需求的工作要求，甚至可以做到在滿足使用軟件進(jìn)行多于原本次數(shù)的運(yùn)行時(shí)，也不會(huì)造成成本的增加，反而會(huì)在應(yīng)用方面降低成本。傳統(tǒng)方法下進(jìn)行數(shù)據(jù)的統(tǒng)計(jì)不僅耗費(fèi)時(shí)間與精力，還需要快速的進(jìn)行整理否則將難以保證數(shù)據(jù)信息的時(shí)效性，甚至?xí)驗(yàn)榭焖俟ぷ?，相關(guān)人員只保證快卻沒有保證質(zhì)量，導(dǎo)致其統(tǒng)計(jì)出的結(jié)果誤差巨大難以使用，尤其在面對大量的數(shù)據(jù)之后，傳統(tǒng)統(tǒng)計(jì)更是難以適應(yīng)，因此要結(jié)合互聯(lián)網(wǎng)技術(shù)以及計(jì)算機(jī)技術(shù)等最先進(jìn)的技術(shù)手段，優(yōu)化統(tǒng)計(jì)的技術(shù)以及模式，通過簡化計(jì)算的流程或者其他操作，以大數(shù)據(jù)技術(shù)完成記錄與整理等相關(guān)工作，簡化工作人員的工作流程。這樣不僅能夠賦予統(tǒng)計(jì)出的數(shù)據(jù)以較強(qiáng)的時(shí)效性以及精準(zhǔn)性。還能夠在統(tǒng)計(jì)的時(shí)候提高統(tǒng)計(jì)數(shù)據(jù)的效率。由此可見多元化的基礎(chǔ)上保證及時(shí)性以及彌補(bǔ)傳統(tǒng)條件下的滯后性是統(tǒng)計(jì)學(xué)統(tǒng)計(jì)效率提升的關(guān)鍵點(diǎn)。

（二）簡單闡述統(tǒng)計(jì)單個(gè)體系的拓展相關(guān)

在傳統(tǒng)的統(tǒng)計(jì)體系中樣本是在整體數(shù)據(jù)中隨機(jī)選取并按照標(biāo)準(zhǔn)進(jìn)行劃分的，傳統(tǒng)統(tǒng)計(jì)學(xué)下的樣本統(tǒng)計(jì)是在總體的概括中消除總數(shù)據(jù)收集時(shí)的難度，以實(shí)現(xiàn)本門學(xué)科體系構(gòu)建時(shí)能夠通過有效的延申過程彌補(bǔ)學(xué)科數(shù)據(jù)采集不足的情況，朝著一個(gè)發(fā)展方向在龐大的數(shù)據(jù)上對該學(xué)科進(jìn)行統(tǒng)籌發(fā)展。而在大數(shù)據(jù)背景下的樣本抽取并不同于傳統(tǒng)的樣本抽取，大數(shù)據(jù)的樣本并不需要立足于整體所有數(shù)據(jù)進(jìn)行抽取，而是只要保證數(shù)據(jù)的凌亂程度足夠保證樣本抽取時(shí)所需要的隨機(jī)性即可。在大數(shù)據(jù)的時(shí)代數(shù)據(jù)流動(dòng)的情況不僅快、多還很亂，在抽取樣本的時(shí)候要從源源不斷的數(shù)據(jù)流中不斷探索才能夠有可能抽取出具備精度以及滿足統(tǒng)計(jì)目的的有效樣本。因此大數(shù)據(jù)的統(tǒng)計(jì)需要更具適應(yīng)性、序貫性的動(dòng)態(tài)抽樣方式。針對頻繁出現(xiàn)的熱門數(shù)據(jù)主要是根據(jù)已經(jīng)獲得的樣本進(jìn)行不斷調(diào)整有關(guān)“可能感興趣”項(xiàng)目以及抽樣對象的調(diào)查與抽取，也是由感興趣的數(shù)據(jù)進(jìn)入樣本并計(jì)入統(tǒng)計(jì)。動(dòng)態(tài)調(diào)整根據(jù)數(shù)據(jù)流的緩沖區(qū)中記錄的新發(fā)生的數(shù)據(jù)的頻數(shù)調(diào)整非樣本的數(shù)據(jù)進(jìn)入樣本的概率。簡單隨機(jī)抽樣很大幾率會(huì)抽到非案例的數(shù)據(jù)，極少會(huì)抽到罕見案例，大數(shù)據(jù)的案例應(yīng)該基于事件進(jìn)行研究有關(guān)抽樣的方法，首先應(yīng)該設(shè)置信號(hào)強(qiáng)度的門檻值以此篩選超過門檻值有機(jī)會(huì)成為熱門的數(shù)據(jù)，再利用其他抽樣技術(shù)對數(shù)據(jù)進(jìn)行再捕獲，不需要等待概率抽樣而是將注意力放在總體中最難以觀測的部分，對大數(shù)據(jù)進(jìn)行捕獲并采用非隨機(jī)的抽樣方式滾雪球的方式，由小到大，從隨機(jī)種子開始不斷加入新的種子，并且通過研究對社會(huì)關(guān)系網(wǎng)絡(luò)和圖的抽樣方式伴隨著雪球逐步擴(kuò)大樣本，從了解網(wǎng)絡(luò)性質(zhì)和結(jié)構(gòu)到研究發(fā)現(xiàn)的稀疏信號(hào)的方法以及壓縮感知的方法，都是需要相關(guān)人員進(jìn)行的重要研究操作如成組檢測。

（三）闡述統(tǒng)計(jì)學(xué)科的應(yīng)用范圍提升的相關(guān)問題

實(shí)踐的過程中需要以舊的理念為起點(diǎn)對以往的一個(gè)結(jié)果或者一個(gè)原因進(jìn)行了解，結(jié)合統(tǒng)計(jì)學(xué)在數(shù)據(jù)時(shí)代背景下的具體應(yīng)用過程展現(xiàn)慣有的研究問題以驅(qū)動(dòng)收集數(shù)據(jù)，從功能來看是極具變化性的，從大數(shù)據(jù)時(shí)代背景來進(jìn)行探究這種變化也不是很難理解因?yàn)樵谶@樣的發(fā)展環(huán)境下統(tǒng)計(jì)學(xué)會(huì)進(jìn)一步發(fā)展并擴(kuò)大，但是在大數(shù)據(jù)的背景下展現(xiàn)更多的多元化不能只依靠傳統(tǒng)統(tǒng)計(jì)學(xué)的參考數(shù)據(jù)的方式，而是要在海量的用戶中開拓出更過的信息，進(jìn)一步挖掘他們生活中所涉及的各個(gè)方面的相關(guān)需求，并依據(jù)這些需求不斷衍生出新的行業(yè)。傳統(tǒng)統(tǒng)計(jì)學(xué)的結(jié)構(gòu)不僅在非結(jié)構(gòu)和板結(jié)構(gòu)的數(shù)據(jù)統(tǒng)計(jì)下具有局限性，目前無法實(shí)現(xiàn)數(shù)據(jù)化行業(yè)的進(jìn)一步發(fā)展。針對傳統(tǒng)的統(tǒng)計(jì)學(xué)而言對相關(guān)數(shù)據(jù)進(jìn)行整合和收集并做好相應(yīng)的統(tǒng)計(jì)結(jié)果分析是其主要工作，這樣的工作模式能夠得到一定數(shù)額的樣本數(shù)據(jù)，但是這些收集而來的數(shù)據(jù)未必全都具有數(shù)據(jù)的使用價(jià)值。大數(shù)據(jù)的技術(shù)可以通過合理且科學(xué)的方式將大量的數(shù)據(jù)引入統(tǒng)計(jì)學(xué)，并積累一定量的數(shù)據(jù)建立數(shù)據(jù)信息庫，將數(shù)據(jù)背后的隱藏信息充分挖掘并將這些信息廣泛的落實(shí)到各個(gè)領(lǐng)域中，讓各個(gè)領(lǐng)域?qū)Υ髷?shù)據(jù)的各種信息進(jìn)行把握，為行業(yè)的長遠(yuǎn)發(fā)展做出積極有效的調(diào)整與改變，精準(zhǔn)把握人們的需求以及市場動(dòng)向。

（四）應(yīng)用在市場營銷中的具體闡述

大數(shù)據(jù)統(tǒng)計(jì)的并不是市場經(jīng)濟(jì)體制下的個(gè)體，而是在信息化高速發(fā)展的情況下能夠有效滲透在各個(gè)領(lǐng)域中的數(shù)據(jù)。在大數(shù)據(jù)時(shí)代中人們的消費(fèi)賬單逐漸從線下轉(zhuǎn)移到線上，由大數(shù)據(jù)技術(shù)合理的統(tǒng)計(jì)，并對數(shù)據(jù)進(jìn)行整理引進(jìn)市場營銷以此種行為為市場營銷的弊端提供相應(yīng)的解決辦法，有效幫助企業(yè)了解客戶所需，為企業(yè)提供科學(xué)有效的市場動(dòng)向信息以及用戶的使用數(shù)據(jù)，這不僅僅是幫助企業(yè)做到大數(shù)據(jù)營銷，更是幫助企業(yè)利用統(tǒng)計(jì)在內(nèi)部的大數(shù)據(jù)庫深度挖掘客戶的需求以實(shí)現(xiàn)企業(yè)的長遠(yuǎn)規(guī)劃發(fā)展以及進(jìn)一步提升盈利的能力等。由此觀之大數(shù)據(jù)技術(shù)的應(yīng)用幫助企業(yè)更好的分析統(tǒng)計(jì)市場的供求關(guān)系，并在數(shù)據(jù)上將用戶的購買力、購買心理等內(nèi)容展現(xiàn)出來，企業(yè)可以以此掌握消費(fèi)者的消費(fèi)心理，以推動(dòng)企業(yè)經(jīng)濟(jì)效益不斷進(jìn)步為目的對用戶的需求持續(xù)挖掘利用，增加收益并實(shí)時(shí)調(diào)整營銷策略，以謀求更長遠(yuǎn)的經(jīng)濟(jì)效益。

二、有關(guān)大數(shù)據(jù)時(shí)代下統(tǒng)計(jì)學(xué)的挑戰(zhàn)列舉及其闡述

（一）樣本選取難度系數(shù)增加是第一個(gè)挑戰(zhàn)

在統(tǒng)計(jì)學(xué)種樣本的統(tǒng)計(jì)是不可缺少的內(nèi)容，其樣本統(tǒng)計(jì)時(shí)的數(shù)據(jù)是后續(xù)研究統(tǒng)計(jì)得出結(jié)果能夠具有真實(shí)性以及實(shí)用性的重要保障，由此可見樣本的統(tǒng)計(jì)是數(shù)據(jù)具有有效性的關(guān)鍵性環(huán)節(jié)，在大數(shù)據(jù)時(shí)代的背景下，數(shù)據(jù)量的龐大以及流動(dòng)性都給樣本的篩選帶來一定的難度，不僅會(huì)出現(xiàn)數(shù)據(jù)不集中、難收集、難確定樣本標(biāo)準(zhǔn)的問題，還會(huì)出現(xiàn)統(tǒng)計(jì)學(xué)無法進(jìn)行結(jié)構(gòu)化數(shù)據(jù)的研究，因?yàn)榫W(wǎng)絡(luò)數(shù)據(jù)并不像其他統(tǒng)計(jì)樣本過程中的數(shù)據(jù)屬于結(jié)構(gòu)化數(shù)據(jù)的范疇，因此在統(tǒng)計(jì)的過程中如何將非結(jié)構(gòu)化的數(shù)據(jù)精準(zhǔn)轉(zhuǎn)化成為結(jié)構(gòu)化的數(shù)據(jù)供人們篩選統(tǒng)計(jì)是第一件應(yīng)該解決的挑戰(zhàn)。

（二）大數(shù)據(jù)時(shí)代統(tǒng)計(jì)學(xué)應(yīng)用時(shí)的挑戰(zhàn)具體列舉

1.有關(guān)信息收集的困難闡述。

大數(shù)據(jù)的信息收集首先要具備的條件就是有價(jià)值，即判斷該數(shù)據(jù)是否具備“我所需要的”這一條件，如果有，則是有價(jià)值的數(shù)據(jù)。大數(shù)據(jù)的信息收集絕對不是隨意進(jìn)行，如果不是有價(jià)值的數(shù)據(jù)將會(huì)在進(jìn)行分析時(shí)得到無用的信息，并且統(tǒng)計(jì)時(shí)也會(huì)出現(xiàn)問題，其結(jié)果并不具備有效的信息傳遞能力。

2.有關(guān)數(shù)據(jù)評(píng)估的困難闡述。

適用性就是數(shù)據(jù)在經(jīng)過信息收集篩選后評(píng)估時(shí)需要的條件，因?yàn)槭占畔r(shí)篩選的標(biāo)準(zhǔn)是所需，并未把數(shù)據(jù)的質(zhì)量當(dāng)作篩選的標(biāo)準(zhǔn)之一，所以為滿足市場對信息、數(shù)據(jù)等的需要，需要對所收集的數(shù)據(jù)進(jìn)行整合并且針對整合的信息進(jìn)行評(píng)估。評(píng)估的結(jié)果會(huì)影響后續(xù)的結(jié)果分析，因此評(píng)估環(huán)節(jié)非常重要，需要具備一定工作經(jīng)驗(yàn)的人員進(jìn)行評(píng)估。

3.有關(guān)數(shù)據(jù)分析的困難闡述。

數(shù)據(jù)分析的環(huán)節(jié)需要專業(yè)人員具備完善的知識(shí)體系，從數(shù)據(jù)的分析到優(yōu)化都需要統(tǒng)計(jì)人員的職業(yè)素養(yǎng)以及業(yè)務(wù)能力作為支撐，因此對專業(yè)人員的要求較高，然而在這項(xiàng)工作進(jìn)行的環(huán)節(jié)我國的企業(yè)并沒有正確的認(rèn)識(shí)到其重要性，不僅沒有專業(yè)的人才隊(duì)伍還側(cè)重于企業(yè)的生產(chǎn)以及交接，一定程度上遏制了統(tǒng)計(jì)環(huán)節(jié)的落實(shí)工作進(jìn)行，給市場營銷環(huán)節(jié)帶來巨大的挑戰(zhàn)。

三、結(jié)束語

綜上所述，大數(shù)據(jù)時(shí)代的到來不僅給統(tǒng)計(jì)學(xué)專業(yè)帶來了機(jī)遇還帶來了挑戰(zhàn)，二者不應(yīng)該分開看待，機(jī)遇與挑戰(zhàn)本就具有不可分割的緊密聯(lián)系，相關(guān)工作人員應(yīng)該在抓住機(jī)遇的同時(shí)，找到傳統(tǒng)統(tǒng)計(jì)學(xué)遺留下來并不適用于大數(shù)據(jù)時(shí)代的不足，改善不足做出創(chuàng)新以此準(zhǔn)備直面挑戰(zhàn)迎接新時(shí)代的機(jī)遇。