大數(shù)據(jù)模式下企業(yè)外來人員管理系統(tǒng)的應(yīng)用

陳海山

（北京九橡科技有限公司，北京 100000）

1 外來施工人員管理的難點(diǎn)

外來施工人員管理的難點(diǎn)主要集中在以下幾方面：（1）人員信息真假混雜，資料無法做到精準(zhǔn)。能源行業(yè)的公司在施工過程中常要面對(duì)大量的外來勞務(wù)人員，流動(dòng)頻繁，人員資料雜亂。對(duì)于人員的信息收集、采集經(jīng)常是讓人員自行填寫，企業(yè)沒有對(duì)應(yīng)的數(shù)據(jù)庫，無法進(jìn)行驗(yàn)證，因此資料經(jīng)常是真假混雜，無法做到精細(xì)、準(zhǔn)確。（2）人員水平參差不齊，且很難快速甄別。因?yàn)槿藛T流動(dòng)頻繁，同時(shí)各種工作有很強(qiáng)的時(shí)效性，很難快速甄別人員素質(zhì)。傳統(tǒng)是采用面試等方式進(jìn)行篩選，很難做到快速、客觀、準(zhǔn)確。（3）技能和安全培訓(xùn)不到位，難把教育關(guān)。一般企業(yè)都會(huì)進(jìn)行入場培訓(xùn)，通過培訓(xùn)普及安全知識(shí)，掌握安全操作技能以及現(xiàn)場操作規(guī)范等內(nèi)容，但是大部分企業(yè)都是以線下講解或者口頭傳達(dá)為主，只進(jìn)行了培訓(xùn)的過程，卻很難達(dá)到培訓(xùn)的目的，管理人員也很難掌握哪些人員是真正培訓(xùn)到位、哪些是沒有掌握，只能加大培訓(xùn)力度，很難準(zhǔn)確掌握人員的培訓(xùn)成果和質(zhì)量。

因此，外來人員的管理很大程度上依賴管理人員的個(gè)人能力、操作水平，日常工作以查看、檢查紙質(zhì)記錄表的方式，耗時(shí)費(fèi)力，數(shù)據(jù)無法客觀，而且管理存在滯后，無法實(shí)現(xiàn)巡檢數(shù)據(jù)、隱患管理、工作量確認(rèn)等信息的實(shí)時(shí)傳輸，也就無法實(shí)現(xiàn)現(xiàn)場工作的實(shí)時(shí)監(jiān)控。

2 基于大數(shù)據(jù)的外來人員管理系統(tǒng)

2.1 大數(shù)據(jù)技術(shù)對(duì)外來人員管理提供的幫助

大數(shù)據(jù)是指通過數(shù)據(jù)平臺(tái)把不同緯度的數(shù)據(jù)進(jìn)行整合，進(jìn)而形成統(tǒng)一標(biāo)準(zhǔn)、規(guī)格，可供統(tǒng)計(jì)、分析、挖掘的大規(guī)模數(shù)據(jù)的集合體?；诖髷?shù)據(jù)技術(shù)的實(shí)現(xiàn)，有以下優(yōu)點(diǎn)。

2.1.1 通過外部的數(shù)據(jù)來豐富本系統(tǒng)數(shù)據(jù)

（1）外來人員管理涉及人員注冊(cè)、審核、培訓(xùn)、入場、管理等業(yè)務(wù)環(huán)節(jié)，在這些環(huán)節(jié)和場景中，可以收集以及需要的數(shù)據(jù)均不相同。（2）在人員注冊(cè)環(huán)境，需要人員填報(bào)相關(guān)的信息，并對(duì)該數(shù)據(jù)進(jìn)行記錄存儲(chǔ)，同時(shí)還需要能夠?qū)θ藛T填寫的信息進(jìn)行核對(duì)驗(yàn)證。（3）在人員審核環(huán)節(jié)，需要能夠根據(jù)人員的信息去補(bǔ)充和收集，例如根據(jù)人員信息查看該人員的健康行程、征信等相關(guān)信息。（4）采用大數(shù)據(jù)技術(shù)，可以通過對(duì)接外部系統(tǒng)實(shí)現(xiàn)對(duì)該人員的信息獲取和補(bǔ)充，輔助系統(tǒng)進(jìn)行信息有效性的判斷。

2.1.2 存儲(chǔ)過程數(shù)據(jù)實(shí)現(xiàn)輔助管理

在日常管理過程中，時(shí)常需要對(duì)該用戶的培訓(xùn)、任務(wù)、考核等進(jìn)行打分，利用大數(shù)據(jù)技術(shù)可以通過對(duì)該用戶的登錄時(shí)間、使用時(shí)長、點(diǎn)擊次數(shù)等相關(guān)數(shù)據(jù)來進(jìn)行分析，從多個(gè)角度進(jìn)行業(yè)務(wù)管理，輔助管理人員進(jìn)行業(yè)務(wù)判斷，有效解決作弊、刷分等問題。

通過大數(shù)據(jù)技術(shù)形成一方數(shù)據(jù)、二方數(shù)據(jù)、三方數(shù)據(jù)等綜合數(shù)據(jù)立方體，其中一方數(shù)據(jù)是用戶或者系統(tǒng)本身產(chǎn)生的數(shù)據(jù)，二方數(shù)據(jù)是同行業(yè)的數(shù)據(jù)，三方數(shù)據(jù)是互聯(lián)網(wǎng)數(shù)據(jù)。通過以上設(shè)計(jì)將外來務(wù)工人員的信息、技能、培訓(xùn)、健康信息以及歷史施工記錄等數(shù)據(jù)進(jìn)行整合和串聯(lián)，通過數(shù)據(jù)挖掘技術(shù)的運(yùn)用，形成可供企業(yè)和現(xiàn)場管理人員利用的有價(jià)值的數(shù)據(jù)。

2.1兩組患者在治療前進(jìn)行比較,差異無統(tǒng)計(jì)學(xué)意義(P>0.05);治療后觀察組患者的各項(xiàng)觀察指標(biāo)均明顯較治療前改善,且改善幅度較對(duì)照組大,P<0.05,見表1。

要使用大數(shù)據(jù)技術(shù)實(shí)現(xiàn)外來人員管理，需按數(shù)據(jù)需求進(jìn)行拆解，分解成獨(dú)立的數(shù)據(jù)立方體分別實(shí)現(xiàn)，如可分別從外來人員的業(yè)務(wù)流程、使用場景、管理需求等方面實(shí)現(xiàn)[1]。

2.2 外來人員管理系統(tǒng)

外來人員管理系統(tǒng)是和當(dāng)前大數(shù)據(jù)技術(shù)相結(jié)合的新型信息管理系統(tǒng)。將傳統(tǒng)的需要人工主觀判斷的數(shù)據(jù)通過大數(shù)據(jù)立方體形成客觀數(shù)據(jù)，將人員審核、學(xué)習(xí)與培訓(xùn)的人力資源融合，既能確保資源的有效利用，又能通過信息技術(shù)的方案將資源充分利用，同時(shí)將學(xué)習(xí)地圖、學(xué)習(xí)途徑、知識(shí)點(diǎn)、學(xué)習(xí)成果等相關(guān)功能通過系統(tǒng)實(shí)現(xiàn)，發(fā)揮多方面的優(yōu)勢(shì)，達(dá)到較好的培訓(xùn)和學(xué)習(xí)效果。

3 系統(tǒng)設(shè)計(jì)

3.1 系統(tǒng)架構(gòu)分析

在遵循整體性、安全性、規(guī)范性、實(shí)用性的總體設(shè)計(jì)思想的基礎(chǔ)上，系統(tǒng)采用多級(jí)子系統(tǒng)，相對(duì)獨(dú)立，但內(nèi)部數(shù)據(jù)又有著密切的聯(lián)系，方便以后業(yè)務(wù)的擴(kuò)展和系統(tǒng)的升級(jí)，在總體架構(gòu)上體現(xiàn)了先進(jìn)的技術(shù)理念。

系統(tǒng)架構(gòu)采用Spring MVC多層架構(gòu)開發(fā)，Spring MVC模塊負(fù)責(zé)視圖層的請(qǐng)求轉(zhuǎn)發(fā)，控制邏輯關(guān)系的處理，Spring MVC是一個(gè)目前比較流行的Web容器框架，可以實(shí)現(xiàn)面向接口的開發(fā)方式，實(shí)現(xiàn)程序和容器之間的控制依賴關(guān)系。此類架構(gòu)體系是業(yè)界通用的技術(shù)標(biāo)準(zhǔn)，而且系統(tǒng)統(tǒng)一數(shù)據(jù)存儲(chǔ)規(guī)則，在此基礎(chǔ)上又將系統(tǒng)細(xì)致地劃分為后臺(tái)數(shù)據(jù)處理層、中間業(yè)務(wù)邏輯處理層、前臺(tái)業(yè)務(wù)邏輯處理層和表現(xiàn)層[2]。

3.2 大數(shù)據(jù)設(shè)計(jì)

大數(shù)據(jù)設(shè)計(jì)重點(diǎn)是大數(shù)據(jù)部分的數(shù)據(jù)聚合部分，該部分支持3種來源數(shù)據(jù)：政務(wù)、社會(huì)、互聯(lián)網(wǎng)的數(shù)據(jù)；5種接入方式：橋接、直接、API、爬蟲、流式。數(shù)據(jù)源類型支持傳統(tǒng)關(guān)系數(shù)據(jù)（如Oracle、MySQL、PostgreSQL、Hadoop、Hive、MPPDB等）、半結(jié)構(gòu)化文件、非結(jié)構(gòu)化文件、流式消息數(shù)據(jù)等，統(tǒng)一存入大數(shù)據(jù)資源池，如HDFS、Hbase、Mppdb、Hive等。

在數(shù)據(jù)匯聚方面提供以下幾種數(shù)據(jù)匯聚方式[3]：（1）支持文件、數(shù)據(jù)庫、流數(shù)據(jù)（物聯(lián)網(wǎng)平臺(tái)數(shù)據(jù)）等多源數(shù)據(jù)匯聚方式。（2）支持互聯(lián)網(wǎng)數(shù)據(jù)匯聚，通過爬蟲技術(shù)實(shí)現(xiàn)互聯(lián)網(wǎng)相關(guān)信息的爬取。（3）實(shí)時(shí)數(shù)據(jù)采集：提供高可用性的、高可靠性的、基于分布式的海量日志的采集、聚合和處理能力；支持定義個(gè)性化數(shù)據(jù)接受方用于傳輸數(shù)據(jù)，同時(shí)可對(duì)采集的數(shù)據(jù)進(jìn)行預(yù)先處理，且進(jìn)行數(shù)據(jù)回寫能力。（4）批量數(shù)據(jù)集成：實(shí)現(xiàn)大數(shù)據(jù)平臺(tái)與關(guān)系型數(shù)據(jù)庫、文件系統(tǒng)之間交換“數(shù)據(jù)”“文件”，同時(shí)也可以將數(shù)據(jù)從關(guān)系型數(shù)據(jù)庫或者文件服務(wù)器導(dǎo)入大數(shù)據(jù)平臺(tái)的HDFS/HBase，或者反過來從HDFS/HBase導(dǎo)出關(guān)系型數(shù)據(jù)庫或者文件服務(wù)器。（5）分布式消息隊(duì)列：提供分布式、分區(qū)化、多副本的消息發(fā)布、訂閱，支持消息持久化、高吞吐、分布式、多客戶端支持、實(shí)時(shí)等特性，適用于離線和在線的消息消費(fèi)場景。

數(shù)據(jù)按照類別分為以下幾種。（1）一方數(shù)據(jù)：外部企業(yè)信息、外部人員信息、人員培訓(xùn)信息、人員工作情況和記錄等。（2）二方數(shù)據(jù)：外部企業(yè)從業(yè)信息、外部企業(yè)行業(yè)評(píng)價(jià)、外部人員從業(yè)信息等。（3）三方數(shù)據(jù)：外部企業(yè)工商信息、企業(yè)征信信息、外部人員身份信息、外部人員征信信息、外部人員資質(zhì)信息、外部人員征信信息，其他外部人員信息等。

4 系統(tǒng)設(shè)計(jì)及應(yīng)用

4.1 外來人員用戶端功能

（1）單位注冊(cè)。外來單位先進(jìn)行公司營業(yè)執(zhí)照注冊(cè)，選擇公司場站，填寫項(xiàng)目名稱并且上傳企業(yè)資質(zhì)，判斷是否是高風(fēng)險(xiǎn)專業(yè)，則上傳三措兩案，然后填寫預(yù)計(jì)時(shí)長和參加工作人數(shù)。（2）用戶注冊(cè)。確定參加外來人員人數(shù)之后，相關(guān)人員通過APP或者Web登錄，填寫身份證注冊(cè)、選擇公司、場站，然后選擇項(xiàng)目名稱上傳個(gè)人資質(zhì)，例如根據(jù)項(xiàng)目是否屬于高危行業(yè)上傳個(gè)人資質(zhì)或者證書資質(zhì)等，最后等待審核。（3）學(xué)習(xí)培訓(xùn)。外來人員審查通過進(jìn)行相關(guān)內(nèi)容學(xué)習(xí)和考試，考試需按照所設(shè)置的學(xué)習(xí)路線進(jìn)行，并且每一項(xiàng)都需要通過之后才可以進(jìn)入下一步。學(xué)習(xí)課程均有管理人員進(jìn)行后臺(tái)設(shè)置。（4）我的工作。已通過考試的人員，則可以進(jìn)入工作模塊查看工作內(nèi)容。

4.2 企業(yè)管理端

4.2.1 單位審核管理

對(duì)已注冊(cè)的單位進(jìn)行審核，可查看當(dāng)前已經(jīng)注冊(cè)的單位信息情況和資質(zhì)，對(duì)于有外部行業(yè)資料數(shù)據(jù)和需要鑒定的內(nèi)容，系統(tǒng)會(huì)根據(jù)大數(shù)據(jù)中的數(shù)據(jù)立方體進(jìn)行對(duì)比和驗(yàn)證：（1）對(duì)公司基本信息自動(dòng)核實(shí)，系統(tǒng)根據(jù)公司相關(guān)信息去工商注冊(cè)網(wǎng)站進(jìn)行驗(yàn)證。（2）對(duì)公司進(jìn)行核實(shí)，將營業(yè)執(zhí)照、高新企業(yè)等證書會(huì)自動(dòng)識(shí)別圖片內(nèi)容，并與國家相關(guān)網(wǎng)站信息進(jìn)行驗(yàn)證。

4.2.2 人員審核管理

對(duì)已經(jīng)注冊(cè)的單位的員工進(jìn)行審核，可查看該員工的相關(guān)信息和相關(guān)資質(zhì)信息，同樣對(duì)于該員工的信息，系統(tǒng)會(huì)根據(jù)大數(shù)據(jù)中的數(shù)據(jù)立方體進(jìn)行對(duì)比和驗(yàn)證：（1）對(duì)人員身份信息自動(dòng)核實(shí)，系統(tǒng)根據(jù)人員填寫的基本信息去第三方身份驗(yàn)證網(wǎng)站進(jìn)行驗(yàn)證。（2）對(duì)人員資質(zhì)信息自動(dòng)核實(shí)，系統(tǒng)根據(jù)人員資質(zhì)信息去第三方資質(zhì)驗(yàn)證網(wǎng)站進(jìn)行驗(yàn)證。（3）對(duì)人員健康信息自動(dòng)核實(shí)，根據(jù)當(dāng)前環(huán)境要求，會(huì)驗(yàn)證該人員的健康阿里（對(duì)接騰訊健康寶或阿里大健康等平臺(tái)），顯示該人員的健康信息。

4.2.3 培訓(xùn)管理

管理員可將課程內(nèi)容設(shè)置為固定的學(xué)習(xí)地圖，外部人員需要通過固定學(xué)習(xí)路徑才能達(dá)到重點(diǎn)，完成培訓(xùn)，針對(duì)不同級(jí)別人員、不同崗位的培訓(xùn)，由相關(guān)項(xiàng)目經(jīng)理負(fù)責(zé)建立學(xué)習(xí)地圖。（1）學(xué)習(xí)地圖管理。可對(duì)學(xué)習(xí)地圖進(jìn)行創(chuàng)建，包括地圖標(biāo)題、封面、簡介以及相關(guān)課程等。（2）地圖目錄管理?？商砑佣鄠€(gè)階段，對(duì)每個(gè)階段設(shè)定學(xué)習(xí)周期，每個(gè)階段可以添加課程、考試、問卷等內(nèi)容，便于學(xué)員統(tǒng)一學(xué)習(xí)。（3）統(tǒng)計(jì)分析。查看學(xué)員的整體學(xué)習(xí)進(jìn)度以及每一門課程、考試等的學(xué)習(xí)進(jìn)度。

4.2.4 人員技能鑒定與外部人才庫管理

（1）人員技能鑒定管理：可根據(jù)外部人員在線上完成的情況生成該人員的技能鑒定結(jié)果，鑒定結(jié)果在培訓(xùn)檔案中體現(xiàn)。（2）外部人才庫管理：系統(tǒng)自動(dòng)將完成崗位課程的學(xué)員推送到相應(yīng)崗位的外部人才庫，可按照當(dāng)前崗位和目標(biāo)崗位管理后備人才，后備人才可以作為公司選拔人才的參考。

4.2.5 數(shù)據(jù)對(duì)接

數(shù)據(jù)對(duì)接模塊為輕量化極簡ETL工具，基于數(shù)據(jù)融合平臺(tái)，可以實(shí)現(xiàn)數(shù)據(jù)的抽取、轉(zhuǎn)化、調(diào)度。該模塊可進(jìn)行可視化拖拽式ETL流程配置，支持對(duì)KettleJob、Trans文件，SQL任務(wù)進(jìn)行調(diào)度，調(diào)度過程中，如果出現(xiàn)任務(wù)異常，可以設(shè)置任務(wù)錯(cuò)誤提醒、超時(shí)提醒等預(yù)警。

4.2.6 數(shù)據(jù)集管理

數(shù)據(jù)集是指報(bào)表人員對(duì)各類數(shù)據(jù)集進(jìn)行定義、管理的界面，主要包含SQL數(shù)據(jù)集、Excel數(shù)據(jù)集兩種方式，數(shù)據(jù)集是定義報(bào)表和圖形的基礎(chǔ)，透視分析、Echarts圖形、電子表格都是基于數(shù)據(jù)集創(chuàng)建的。

4.2.7 數(shù)據(jù)分析

通過用戶數(shù)據(jù)分析，幫助管理人員進(jìn)行業(yè)務(wù)分析和管理。通過建立管理看板，實(shí)現(xiàn)查看數(shù)據(jù)和圖表實(shí)時(shí)主動(dòng)監(jiān)控外來人員相關(guān)的宏觀運(yùn)營情況，及時(shí)決策，并提供以下分析工具。（1）鉆取分析：基于會(huì)話和事件屬性的多維度數(shù)據(jù)分析，篩選條件可對(duì)屬性字段進(jìn)行任意組合，細(xì)致洞察用戶行為。（2）用戶畫像：通過多重用戶屬性確定外來人員詳細(xì)畫像，真正了解外來人員的方方面面。（3）群體分析：針對(duì)用戶屬性和行為偏好進(jìn)行篩選，創(chuàng)建不同的用戶分群，分群數(shù)據(jù)動(dòng)態(tài)更新。（4）用戶路徑：追蹤外來人員在企業(yè)工作過程中的業(yè)務(wù)路徑，及時(shí)調(diào)整業(yè)務(wù)流程和體系。（5）管理：管理用戶權(quán)限和接入應(yīng)用，快速開通賬戶，批量接入用于數(shù)據(jù)分析的各端應(yīng)用數(shù)據(jù)。（6）數(shù)據(jù)看板：針對(duì)各種不同訴求規(guī)劃不同的數(shù)據(jù)看板，滿足從管理層到各個(gè)部門的數(shù)據(jù)訴求。

5 結(jié)語

綜上所述，文章闡述了一種基于大數(shù)據(jù)技術(shù)的外來人員信息管理系統(tǒng)的實(shí)現(xiàn)與應(yīng)用，系統(tǒng)采用3層系統(tǒng)架構(gòu)，單獨(dú)的數(shù)據(jù)匯聚層，提高了系統(tǒng)數(shù)據(jù)的準(zhǔn)確度、完整性，補(bǔ)全了業(yè)務(wù)數(shù)據(jù)缺失等問題，完善了業(yè)務(wù)流程，減少了實(shí)際業(yè)務(wù)中需要員工進(jìn)行臆斷或者手動(dòng)操作等環(huán)節(jié)，并且大大減少了管理人員的工作量等，提高了業(yè)務(wù)效率和業(yè)務(wù)準(zhǔn)確度。