大數(shù)據(jù)時(shí)代對傳統(tǒng)統(tǒng)計(jì)數(shù)據(jù)收集的影響

張 蓮（山東省濟(jì)寧市泗水縣統(tǒng)計(jì)局）

■ 傳統(tǒng)統(tǒng)計(jì)數(shù)據(jù)的收集方法

我國政府統(tǒng)計(jì)部門傳統(tǒng)的數(shù)據(jù)收集方法。

（一）三大周期性普查

我國三大普查：每隔10年進(jìn)行一次的農(nóng)業(yè)普查、人口普查，根據(jù)經(jīng)濟(jì)發(fā)展周期每隔5年進(jìn)行一次的經(jīng)濟(jì)普查，是由統(tǒng)計(jì)部門組織，用來調(diào)查一定時(shí)點(diǎn)或時(shí)期內(nèi)的社會(huì)經(jīng)濟(jì)現(xiàn)象總量，對調(diào)查對象全覆蓋、大規(guī)模的全面調(diào)查。

（二）抽樣調(diào)查和其他非全面調(diào)查

除去三大普查，我國統(tǒng)計(jì)數(shù)據(jù)的直接來源還有抽樣調(diào)查、重點(diǎn)調(diào)查、典型調(diào)查以及一些常規(guī)統(tǒng)計(jì)報(bào)表。常用的數(shù)據(jù)采集方式有聯(lián)網(wǎng)直報(bào)、城鄉(xiāng)一體化調(diào)查、價(jià)格調(diào)查、地塊調(diào)查、糧食抽樣等方式。

普查與抽樣調(diào)查及其他非全面調(diào)查方式的缺點(diǎn)：

三大普查，是對我國國情國力的全面調(diào)查，涉及面廣，指標(biāo)多，工作量大，時(shí)間性強(qiáng)，對集中領(lǐng)導(dǎo)和統(tǒng)一行動(dòng)的要求質(zhì)量高，需要較多的人力、物力和財(cái)力，且調(diào)查周期長。

筆者從2005年進(jìn)入統(tǒng)計(jì)站開始統(tǒng)計(jì)工作，親身歷經(jīng)了2006年、2016年的兩次農(nóng)業(yè)普查，2008年、2013年和2018年的三次經(jīng)濟(jì)普查，2010年和還沒有結(jié)束的2020年的兩次人口普查。從開始的紙質(zhì)調(diào)查表入戶登記、人工匯總指標(biāo)、抄寫正式表、光電掃描數(shù)據(jù)錄入上傳至國家數(shù)據(jù)庫，到2013年第三次經(jīng)濟(jì)普查第一次使用電子數(shù)據(jù)采集終端PDA進(jìn)行入戶登記、現(xiàn)場采集數(shù)據(jù)、上傳到國家普查數(shù)據(jù)采集平臺，統(tǒng)計(jì)數(shù)據(jù)收集方式越來越先進(jìn)，越來越智能化，但缺點(diǎn)也顯而易見。

（三）數(shù)據(jù)的間接來源方式

統(tǒng)計(jì)數(shù)據(jù)的間接來源方式主要是與企業(yè)生產(chǎn)經(jīng)營活動(dòng)有關(guān)的各種資料，各級政府行政部門為履行其職能，如辦證、登記、檢查、保險(xiǎn)、稅收等，而收集、記錄、和保存在文件、檔案中個(gè)人或單位的資料記錄。統(tǒng)計(jì)部門把這些收集來的數(shù)據(jù)再經(jīng)過篩選、比對、匯總等加工方式，得到符合需要的數(shù)據(jù)。

這些間接的數(shù)據(jù)采集方式，有著共同的優(yōu)點(diǎn)：

第一，可降低統(tǒng)計(jì)成本。從公共管理部門處取得行政記錄，是一種方便、快捷、簡單易行的調(diào)查內(nèi)容，成本極低，能節(jié)約大量人力、物力、財(cái)力。對調(diào)查對象來說，使用行政記錄也可以減輕調(diào)查對象的負(fù)擔(dān)。第二，可提高統(tǒng)計(jì)部門的數(shù)據(jù)準(zhǔn)確性。行政性檔案是為了本部門的管理和控制而建立的，因此，行政檔案能夠真實(shí)地反映社會(huì)、經(jīng)濟(jì)現(xiàn)象的運(yùn)動(dòng)、變化過程，大部分行政檔案反映的是公民自愿的主動(dòng)行為，不易弄虛作假。即使罰款等行政記錄反映的是非自愿行為，其記錄也往往是強(qiáng)制性的，一旦發(fā)生情況，則必須予以記錄備案，以保存最客觀的證據(jù)。第三，可驗(yàn)證統(tǒng)計(jì)分析結(jié)論的正確性。使用這些行政記錄進(jìn)行數(shù)據(jù)間的匹配性分析，加強(qiáng)相關(guān)性、邏輯性研究，來評估驗(yàn)證數(shù)據(jù)質(zhì)量，驗(yàn)證統(tǒng)計(jì)分析結(jié)論的正確性。

但也有著共同的缺點(diǎn)：

第一，和統(tǒng)計(jì)上的指標(biāo)分類標(biāo)準(zhǔn)不一樣。有些企業(yè)的報(bào)表、財(cái)務(wù)數(shù)據(jù)或部門的行政記錄數(shù)據(jù)有著自身填報(bào)或記錄目的，有著自己一套嚴(yán)密的方法體系，這就和我們統(tǒng)計(jì)部門的統(tǒng)計(jì)指標(biāo)體系有著很多的差異。第二，兩者覆蓋范圍也不一樣，企業(yè)的報(bào)表、財(cái)務(wù)數(shù)據(jù)或部門數(shù)據(jù)僅僅是本單位或本部門管理范圍內(nèi)的數(shù)據(jù)，無法保證其完整的代表性。第三，時(shí)間記錄規(guī)則不一致。統(tǒng)計(jì)一般分為時(shí)點(diǎn)指標(biāo)或時(shí)期指標(biāo)，一般按照日歷年限核算，但有些部門的數(shù)據(jù)出于行政管理的需要，會(huì)調(diào)整不同的時(shí)期，例如對于出生人口這一指標(biāo)，公安部門規(guī)定只有新生兒到公安部門登記戶口才能算作出生人口，但我們統(tǒng)計(jì)則按實(shí)際發(fā)生的時(shí)間點(diǎn)來統(tǒng)計(jì)出生或者死亡。第四，單位或部門數(shù)據(jù)的保密性與隱私性。有些部門或單位出于對本部門信息的保密或?qū)耠[私的保護(hù)，無法提供或者根本不愿意提供。隨著我國經(jīng)濟(jì)日新月異的發(fā)展，互聯(lián)網(wǎng)、物聯(lián)網(wǎng)技術(shù)突飛猛進(jìn)，海量的信息、各種類型的數(shù)據(jù)潮水般地涌進(jìn)人們的生活、工作中，這些數(shù)量大、速度快、多樣性、時(shí)效性強(qiáng)的大數(shù)據(jù)強(qiáng)烈地沖擊著我們的統(tǒng)計(jì)工作，傳統(tǒng)數(shù)據(jù)的收集方法已經(jīng)越來越不適應(yīng)新時(shí)代賦予我們統(tǒng)計(jì)工作的新職能，急需我們探索新的方式方法。

■ 大數(shù)據(jù)的特點(diǎn)

數(shù)據(jù)規(guī)模大。國務(wù)院發(fā)展研究中心信息中心研究處處長李廣乾說過：“大數(shù)據(jù)的市場規(guī)模沒有天花板”，我國經(jīng)濟(jì)發(fā)展飛速，產(chǎn)生數(shù)據(jù)的終端增多，每天各行各業(yè)的數(shù)據(jù)信息如潮水般涌來。信息流轉(zhuǎn)快。信息時(shí)代，人作為網(wǎng)絡(luò)的核心，每天都在制造爆炸式數(shù)據(jù)，這些數(shù)據(jù)再被相應(yīng)的電商、企業(yè)、政府、銀行等部門收集、處理、運(yùn)用，從而使數(shù)據(jù)快速流動(dòng)起來。數(shù)據(jù)類型多。大數(shù)據(jù)的來源，包括交通運(yùn)輸，互聯(lián)網(wǎng)文件處理、制作互聯(lián)網(wǎng)搜索引擎索引、通信記錄明細(xì)、金融大數(shù)據(jù)、醫(yī)療大數(shù)據(jù)、社交網(wǎng)絡(luò)、照片圖像、大規(guī)模的電子商務(wù)等各行各業(yè)，從而造成各種各樣的類型，包括數(shù)字、文字、視頻、圖片、聲音等。價(jià)值密度低。爆炸式海量的數(shù)據(jù)，覆蓋面廣，信息雜，包含的模糊信息多，從而價(jià)值密度就低。

■ 對傳統(tǒng)體制的挑戰(zhàn)

目前我們的統(tǒng)計(jì)調(diào)查手段，雖然已是現(xiàn)代化，但不等于統(tǒng)計(jì)調(diào)查體系的現(xiàn)代化，我國當(dāng)前統(tǒng)計(jì)調(diào)查體系的主要問題是各種調(diào)查方式、調(diào)查力量和數(shù)據(jù)來源的有效整合不夠，各種統(tǒng)計(jì)調(diào)查制度、方式方法不能很好地銜接，數(shù)據(jù)孤島現(xiàn)象十分突出。

許多大數(shù)據(jù)，例如社交媒體數(shù)據(jù)，微信、QQ、淘寶等網(wǎng)上產(chǎn)品的價(jià)格信息，多是由觀察數(shù)據(jù)組成，因此沒有明確定義目標(biāo)人群、結(jié)構(gòu)和質(zhì)量。這使得基于采樣理論的傳統(tǒng)統(tǒng)計(jì)方法難以應(yīng)用許多大數(shù)據(jù)源的非結(jié)構(gòu)化性質(zhì)，使得提取有意義的統(tǒng)計(jì)信息變得更加困難。大數(shù)據(jù)時(shí)代對數(shù)據(jù)的收集分為三步，第一步數(shù)據(jù)預(yù)處理，包括識別與整理。第二步數(shù)據(jù)分析，提煉有價(jià)值信息。第三步數(shù)據(jù)存儲。

■ 應(yīng)對措施

（一）統(tǒng)計(jì)體系改革，制定新的指標(biāo)體系

1.建立智能數(shù)據(jù)系統(tǒng)

在基于原來聯(lián)網(wǎng)直報(bào)、常規(guī)統(tǒng)計(jì)報(bào)表、周期性普查、抽樣調(diào)查的基礎(chǔ)上，引入大數(shù)據(jù)共享平臺，開發(fā)新的針對大數(shù)據(jù)特征的指標(biāo)體系和指標(biāo)解釋方法，把來源于各個(gè)網(wǎng)絡(luò)終端的數(shù)據(jù)，快速的收集、整合、去雜、存儲，建立新的智能數(shù)據(jù)系統(tǒng)。

2.整合傳統(tǒng)統(tǒng)計(jì)數(shù)據(jù)

整合各類普查、常規(guī)調(diào)查和專項(xiàng)調(diào)查等數(shù)據(jù)，打破專業(yè)壁壘和信息孤島，實(shí)現(xiàn)數(shù)據(jù)共享和深度開發(fā)。

3.完善統(tǒng)計(jì)業(yè)務(wù)流程

統(tǒng)計(jì)數(shù)據(jù)收集、整理、分析和儲存的科學(xué)化生產(chǎn)流程，通過技術(shù)創(chuàng)新，改變了傳統(tǒng)的統(tǒng)計(jì)工作方式，進(jìn)一步提高了統(tǒng)計(jì)工作的質(zhì)量、效率和水平。

4.加快大數(shù)據(jù)應(yīng)用創(chuàng)新

推動(dòng)統(tǒng)計(jì)數(shù)據(jù)采集方式的變革，充分利用電子行政記錄、企業(yè)生產(chǎn)經(jīng)營記錄、大數(shù)據(jù)等，完善數(shù)據(jù)解讀機(jī)制和方法。推動(dòng)大數(shù)據(jù)統(tǒng)計(jì)研究，充分利用國內(nèi)統(tǒng)計(jì)學(xué)界在大數(shù)據(jù)領(lǐng)域的研究力量，開展大數(shù)據(jù)應(yīng)用研究，與大數(shù)據(jù)企業(yè)、高校及科研機(jī)構(gòu)開展廣泛合作。

（二）統(tǒng)計(jì)機(jī)構(gòu)轉(zhuǎn)型，提升基本服務(wù)職能

海量大數(shù)據(jù)的采集與加工整理，對統(tǒng)計(jì)機(jī)構(gòu)特別是基層統(tǒng)計(jì)機(jī)構(gòu)的轉(zhuǎn)型是個(gè)不小的挑戰(zhàn)，傳統(tǒng)統(tǒng)計(jì)工作方式必須做出相應(yīng)的轉(zhuǎn)型，由以往的催報(bào)、審核、匯總，轉(zhuǎn)型為挖掘、分析、快速加工整理，建立專業(yè)的、相適應(yīng)的、新的數(shù)據(jù)存儲平臺，對瞬息萬變的大數(shù)據(jù)信息做出及時(shí)有效的挖掘整理，提煉出我們需要的數(shù)據(jù)，由以往的數(shù)據(jù)傳輸功能轉(zhuǎn)型為信息反應(yīng)與預(yù)警服務(wù)功能，以提升和豐富統(tǒng)計(jì)機(jī)構(gòu)的基本服務(wù)職能。

（三）統(tǒng)計(jì)人員技能升級，夯實(shí)數(shù)據(jù)收集基礎(chǔ)

1.加強(qiáng)統(tǒng)計(jì)人員業(yè)務(wù)能力培養(yǎng)

加強(qiáng)統(tǒng)計(jì)人員，特別是基層統(tǒng)計(jì)人員對大數(shù)據(jù)信息的挖掘、整理、甄別技術(shù)能力的培養(yǎng)；讓統(tǒng)計(jì)人員熟練掌握先進(jìn)的數(shù)據(jù)挖掘、分析整理工具與軟件，提高每個(gè)人的專業(yè)技術(shù)能力；加強(qiáng)相應(yīng)專業(yè)技術(shù)人才的引進(jìn)與培養(yǎng)，夯實(shí)適應(yīng)新技術(shù)、新業(yè)務(wù)的統(tǒng)計(jì)人才基礎(chǔ)。

2.改變傳統(tǒng)思維方式

打破原來固有的數(shù)據(jù)“收集、匯總、上報(bào)”傳統(tǒng)的統(tǒng)計(jì)思維方式，向智能化數(shù)據(jù)收集、分析、加工、整理方式轉(zhuǎn)變，以適應(yīng)現(xiàn)代化的大數(shù)據(jù)采集方式。

3.提供政府統(tǒng)計(jì)分析思路

政府應(yīng)推進(jìn)大數(shù)據(jù)統(tǒng)計(jì)研究，為更好地開展大數(shù)據(jù)應(yīng)用提供理論支撐，同時(shí)關(guān)注國外大數(shù)據(jù)統(tǒng)計(jì)應(yīng)用動(dòng)態(tài)，及時(shí)分析成果，推動(dòng)數(shù)據(jù)共享，讓更多的人使用更多的數(shù)據(jù)，在使用過程中對數(shù)據(jù)進(jìn)行進(jìn)一步加工，使數(shù)據(jù)賦予更多的信息。

■ 總結(jié)

綜上所述，大數(shù)據(jù)時(shí)代，面對海量數(shù)據(jù)信息的爆炸式增長，傳統(tǒng)的數(shù)據(jù)采集方式已很難適應(yīng)。統(tǒng)計(jì)處和統(tǒng)計(jì)員應(yīng)充分利用大數(shù)據(jù)，豐富統(tǒng)計(jì)資料的來源，優(yōu)化統(tǒng)計(jì)方法，對現(xiàn)有統(tǒng)計(jì)資料進(jìn)行統(tǒng)計(jì)分析。審計(jì)工作中也在積極探索，進(jìn)行了一系列有益的嘗試，推動(dòng)大數(shù)據(jù)真正成為推動(dòng)政府統(tǒng)計(jì)工作發(fā)展的強(qiáng)大動(dòng)力，為政府部門和社會(huì)各界提供高質(zhì)量的統(tǒng)計(jì)服務(wù)。