高校大數(shù)據(jù)人才能力培養(yǎng)結(jié)構(gòu)體系的研究與設(shè)計

【摘 要】本文論述高校大數(shù)據(jù)人才能力培養(yǎng)結(jié)構(gòu)體系的設(shè)計，針對大數(shù)據(jù)專業(yè)建設(shè)中方向不明確、培養(yǎng)體系不清晰、專業(yè)內(nèi)容不切實際等問題，結(jié)合企業(yè)各崗位的工作能力要求，設(shè)計了基于應(yīng)用、專業(yè)知識與數(shù)據(jù)思維相結(jié)合的大數(shù)據(jù)技能型人才能力培養(yǎng)結(jié)構(gòu)體系，并明確了體系中各個工作領(lǐng)域的能力要求和知識目標。

【關(guān)鍵詞】大數(shù)據(jù) ?專業(yè)知識 ?數(shù)據(jù)思維

【中圖分類號】G ?【文獻標識碼】A

【文章編號】0450-9889（2020）06C-0139-03

大數(shù)據(jù)的應(yīng)用受到社會和企業(yè)的高度重視，那么大數(shù)據(jù)專業(yè)人才該如何培養(yǎng)呢？根據(jù)調(diào)研發(fā)現(xiàn)，以往很多專業(yè)在建設(shè)中，結(jié)合崗位能力設(shè)計專業(yè)能力培養(yǎng)結(jié)構(gòu)體系時，以“一專一能”的思想基礎(chǔ)，打造專業(yè)人才培養(yǎng)方向。但大數(shù)據(jù)涉及領(lǐng)域廣，綜合性強，顯然以一個專業(yè)方向?qū)?yīng)一項專業(yè)能力的思維培養(yǎng)人才，不符合社會需求。綜合目前工作崗位對大數(shù)據(jù)人才的能力要求來看，大數(shù)據(jù)人才必須具有計算機相關(guān)專業(yè)技術(shù)，也要具有數(shù)據(jù)統(tǒng)計分析專業(yè)技術(shù)。高校培養(yǎng)大數(shù)據(jù)專業(yè)人才應(yīng)該著重從這兩方面進行專業(yè)技術(shù)培養(yǎng)。

一、大數(shù)據(jù)人才能力培養(yǎng)結(jié)構(gòu)體系構(gòu)架

明確高校培養(yǎng)大數(shù)據(jù)人才應(yīng)注重計算機專業(yè)技能和數(shù)據(jù)分析處理技能后，再根據(jù)此設(shè)計能力培養(yǎng)體系。計算機專業(yè)技術(shù)是指能綜合利用各種計算機技術(shù)和知識，收集、獲取、整理海量數(shù)據(jù)并加以存儲，為支撐相關(guān)決策和行為做好數(shù)據(jù)準備。一是搭建大數(shù)據(jù)處理的工作環(huán)境，這一步需要技術(shù)人員熟悉做大數(shù)據(jù)處理需要什么樣的硬件支持，包括服務(wù)器、交換機、數(shù)據(jù)顯示屏等。二是配置大數(shù)據(jù)軟件，軟件的性能對數(shù)據(jù)的處理，從搜集到分析結(jié)果都起著至關(guān)重要的作用，軟件功能強不強大，意味著結(jié)果準不準確。在這個階段，技術(shù)人員應(yīng)具備較強的軟件開發(fā)能力，熟悉多種數(shù)據(jù)處理軟件，也可以在現(xiàn)有軟件的基礎(chǔ)上，進行二次開發(fā)和新功能的開發(fā)。三是大數(shù)據(jù)處理，這個階段過程包括數(shù)據(jù)挖掘、數(shù)據(jù)分析和數(shù)據(jù)服務(wù)、數(shù)據(jù)平臺管理等，是技術(shù)人員需要具有的核心技術(shù)。四是數(shù)據(jù)安全防護，數(shù)據(jù)安全防護保證數(shù)據(jù)私密性、安全性和有效性。

數(shù)據(jù)分析處理技能主要是指數(shù)據(jù)分析相關(guān)的技能和思維，能借助技術(shù)分析大數(shù)據(jù)的能力，能根據(jù)具體需求，采用有效方法和模型分析數(shù)據(jù)并形成報告，為解決實際問題提供決策依據(jù)，主要包括數(shù)學、統(tǒng)計學、數(shù)據(jù)分析和自然語言處理等。

高校大數(shù)據(jù)專業(yè)建設(shè)在制定培養(yǎng)體系時，結(jié)合應(yīng)用領(lǐng)域的前提下，應(yīng)注意計算機專業(yè)技能和數(shù)據(jù)分析處理技能的融合，形成兩條技能支柱，如圖1所示。

二、大數(shù)據(jù)人才能力體系設(shè)計

在明確大數(shù)據(jù)人才的技能體系結(jié)構(gòu)后，我們需要思考如何培養(yǎng)大數(shù)據(jù)人才具備這些技能，需要什么樣的知識體系來獲取技能。大數(shù)據(jù)項目實施的實質(zhì)就是利用計算機處理海量數(shù)據(jù)，項目的具體工作具有一定結(jié)構(gòu)模塊性，我們可以采用“面向?qū)ο蠓ā眮順?gòu)建能力體系，也就是按照一個全面的大數(shù)據(jù)專業(yè)人才在實施大數(shù)據(jù)項目的過程中，需要完成哪些步驟的工作，完成每一項工作需要哪些能力來構(gòu)建。通過對實際的調(diào)研考察和總結(jié)規(guī)整，一個完整的大數(shù)據(jù)項目可以被劃分為六個階段性工作：項目規(guī)劃設(shè)計、大數(shù)據(jù)處理、數(shù)據(jù)平臺管理、數(shù)據(jù)分析挖掘、運營管理和大數(shù)據(jù)應(yīng)用。

（一）項目規(guī)劃設(shè)計。大數(shù)據(jù)項目規(guī)劃設(shè)計是以大數(shù)據(jù)頂層設(shè)計思維，構(gòu)建大數(shù)據(jù)平臺及大數(shù)據(jù)應(yīng)用系統(tǒng)的框架，是指導(dǎo)大數(shù)據(jù)項目建設(shè)實施的標準。項目規(guī)劃設(shè)計工作貫穿整個項目的建設(shè)，各個階段的合力規(guī)劃及部署都非常重要。圍繞大數(shù)據(jù)項目的建設(shè)，大數(shù)據(jù)應(yīng)用領(lǐng)域相繼出現(xiàn)了大數(shù)據(jù)解決方案經(jīng)理、大數(shù)據(jù)咨詢顧問、大數(shù)據(jù)咨詢規(guī)劃師、大數(shù)據(jù)架構(gòu)師、業(yè)務(wù)架構(gòu)師、大數(shù)據(jù)售前等相關(guān)角色及崗位。因此，規(guī)劃設(shè)計類崗位一般是公司的核心崗位，要求大數(shù)據(jù)從業(yè)者綜合能力比較強，能承擔項目實施中的咨詢工作，研究政府信息化行業(yè)的發(fā)展，為產(chǎn)品超前發(fā)展提供建設(shè)性意見，與客戶進行大數(shù)據(jù)技術(shù)交流，掌握和識別客戶需求，形成用戶需求文檔，能夠把技術(shù)和業(yè)務(wù)融合，負責大數(shù)據(jù)及數(shù)據(jù)分析行業(yè)解決方案設(shè)計，具備創(chuàng)新型思維，全局感強。

大數(shù)據(jù)項目規(guī)劃設(shè)計對大數(shù)據(jù)專業(yè)人才的專業(yè)技能要求比較高、更全面，具體包括：理解大數(shù)據(jù)概念并具備大數(shù)據(jù)創(chuàng)新思維;熟悉主流的數(shù)據(jù)庫、BI、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘等領(lǐng)域知識;熟悉數(shù)據(jù)挖掘理論基礎(chǔ)知識，熟悉常用算法的實現(xiàn)與應(yīng)用;熟練使用統(tǒng)計分析或數(shù)據(jù)挖掘工具（SPSS，SAS，R等）;熟悉大數(shù)據(jù)處理架構(gòu)，熟悉Hadoop，Hbase，Zookeeper，Hive運作的內(nèi)部機制，以及相關(guān)組件的優(yōu)勢與劣勢;精通Office辦公軟件，善于思考，思路清晰，邏輯思維能力強;具備項目管理思維及項目管理能力，具備良好的客戶服務(wù)意識、宣講能力和溝通能力。

（二）大數(shù)據(jù)處理。數(shù)據(jù)在信息時代的重要性是有目共睹的，通過挖掘數(shù)據(jù)價值，關(guān)聯(lián)分析并輔助決策，給人們帶來了巨大的經(jīng)濟價值。分析挖掘數(shù)據(jù)技術(shù)，包含對數(shù)據(jù)進行清洗、數(shù)據(jù)轉(zhuǎn)換等，而面對海量的數(shù)據(jù)，如何進行有效快速的處理是首先需要解決的問題，因此產(chǎn)生了一批大數(shù)據(jù)處理類的崗位，如數(shù)據(jù)分析師、ETL工程師、數(shù)據(jù)清洗工程師等。該工作崗位人員必須具備的能力包括：精通網(wǎng)頁抓取原理及技術(shù)，精通正則表達式，從結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)中獲取信息;熟悉JAVA、Python編程語言;熟悉linux平臺開發(fā);熟悉搜索引擎和網(wǎng)絡(luò)爬蟲相關(guān)技術(shù);熟悉主流數(shù)據(jù)庫技術(shù)、大數(shù)據(jù)平臺及各組件應(yīng)用場景;熟悉Scrapy，Lucene，Nutch，Heritrix，HtmlParser等開源工具;熟練使用ETL開發(fā)工具，如Datastage，Congos，Kettle等。

（三）數(shù)據(jù)平臺管理。面對大數(shù)據(jù)技術(shù)，就會想到Hadoop，而圍繞Hadoop體系構(gòu)建的大數(shù)據(jù)平臺是大數(shù)據(jù)分布式存儲和分布式計算的基礎(chǔ)。大數(shù)據(jù)平臺匯聚內(nèi)部及外部多渠道數(shù)據(jù)，形成大數(shù)據(jù)中心，為業(yè)務(wù)層及創(chuàng)新型業(yè)務(wù)提供數(shù)據(jù)及決策服務(wù)支撐。所以大數(shù)據(jù)平臺開發(fā)類崗位是當前較為熱門的大數(shù)據(jù)崗位，如大數(shù)據(jù)開發(fā)工程師、數(shù)據(jù)倉庫工程師、大數(shù)據(jù)運維工程師、數(shù)據(jù)爬蟲工程師。進行大數(shù)據(jù)平臺開發(fā)需要具備的能力包括：Linux操作系統(tǒng)基礎(chǔ);熟悉JAVA，Python開發(fā)語言;精通Hadoop生態(tài)系統(tǒng)組件，熟悉大數(shù)據(jù)平臺性能監(jiān)控及調(diào)優(yōu)方法;精通storm流式數(shù)據(jù)處理框架技術(shù);精通Spark內(nèi)存計算框架技術(shù);熟悉數(shù)據(jù)處理流程，熟悉大數(shù)據(jù)平臺部署環(huán)境及步驟。

（四）數(shù)據(jù)分析挖掘。數(shù)據(jù)分析挖掘一般是指通過算法搜索隱藏于大量數(shù)據(jù)中的有效信息的過程。數(shù)據(jù)分析挖掘通常與計算機科學、統(tǒng)計學、數(shù)學有關(guān)，并通過統(tǒng)計、在線分析處理、多維分析、關(guān)聯(lián)分析、信息檢索、機器學習、專家評估和模式識別等諸多方法來實現(xiàn)上述目標。分析挖掘也是體現(xiàn)大數(shù)據(jù)的核心技術(shù)，是洞察大數(shù)據(jù)價值的最重要手段。圍繞分析挖掘類的崗位有很多，如數(shù)據(jù)分析師、數(shù)據(jù)建模工程師、數(shù)據(jù)挖掘工程師、風控分析師、決策分析師等。分析挖掘類崗位要求大數(shù)據(jù)工作人員需要具有的能力包括：精通Excel，PPT等Office辦公軟件操作;具備統(tǒng)計學基礎(chǔ)知識;熟悉SQL，SPSS，Python語言;具備較強的邏輯思維能力、溝通表達能力和組織協(xié)調(diào)能力;具備產(chǎn)品原型設(shè)計能力及熟悉主流的產(chǎn)品原型設(shè)計工具。熟悉數(shù)據(jù)倉庫各類模型的建模知識;數(shù)據(jù)倉庫的分層架構(gòu)、3NF和多維數(shù)據(jù)模型設(shè)計;熟悉Hive，DB2，Teradata，Greeenplum原理知識，并且會調(diào)優(yōu);熟悉Linux操作系統(tǒng)及JAVA，Python開發(fā)語言;熟悉數(shù)據(jù)庫原理（如PostgreSQL，Mysql，Oracle，DB2，SqlServer等）。

（五）運營管理。數(shù)據(jù)運營管理是面對海量的結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)，運營、管理和治理這些數(shù)據(jù)，通常包括原始數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)標準管理、數(shù)據(jù)服務(wù)管理等，解決大數(shù)據(jù)運營中的問題及構(gòu)建新的商業(yè)模式。它要求工作人員具備的能力包括：獨立大數(shù)據(jù)分析模型，具有數(shù)據(jù)敏感度，能從海量數(shù)據(jù)中分析挖掘問題，提煉洞察;熟練運用SQL，Excel，Access等數(shù)據(jù)可視化工具;具備大數(shù)據(jù)分析問題的思路及方法，能夠把合理的思路成功應(yīng)用于實踐;熟悉客戶關(guān)系管理分析及數(shù)據(jù)化運營;熟悉大數(shù)據(jù)平臺開發(fā)基礎(chǔ)技術(shù);了解數(shù)據(jù)挖掘算法及分析、建模方法;具備數(shù)據(jù)管理方法論，熟悉數(shù)據(jù)治理方法。

（六）大數(shù)據(jù)應(yīng)用。大數(shù)據(jù)應(yīng)用主要技術(shù)就是數(shù)據(jù)的展現(xiàn)，也就是大數(shù)據(jù)可視化技術(shù)。數(shù)據(jù)模型可視化是非常重要的一個環(huán)節(jié)，它用非常形象、清晰易懂的圖形方式將數(shù)據(jù)價值呈現(xiàn)出來?？梢暬悕徫恢饕锌梢暬こ處?、UI設(shè)計師、BI分析師、前端工程師等。它要求工作人員具備的能力包括：熟悉主流可視化產(chǎn)品，熟練使用Tableau，Echarts，D3等產(chǎn)品，了解開源可視化工具;了解Oracle，Mysql等傳統(tǒng)數(shù)據(jù)庫應(yīng)用;熟練使用Excel工具;精通Web圖形的渲染技術(shù)（SVG，Canvas，WebGL等）;精通HTML5，CSS，JQuery，JS等技術(shù);熟悉數(shù)據(jù)倉庫、集市構(gòu)建流程及技術(shù);熟練使用MSTR報表工具;熟悉ETL工具及使用場景。

高校在大數(shù)據(jù)專業(yè)人才的培養(yǎng)過程中還需要考慮理論教學與實踐教學相結(jié)合，配套建設(shè)大數(shù)據(jù)實訓基地，著重培養(yǎng)計算機專業(yè)技能和數(shù)據(jù)分析技能，遵循“教學訓”的教學模式，培養(yǎng)團隊合作精神，加強學生對產(chǎn)業(yè)領(lǐng)域的了解，讓培養(yǎng)出來的技能人才能夠快速適應(yīng)社會的需要。

【參考文獻】

[1]張元萍，周遠，楊哲.金融工程多維度復(fù)合型人才培養(yǎng)模式的構(gòu)建與探索[J].教育進展，2018（5）.

[2]燕東，魏麗杰，王曉梅.高校武術(shù)與民族傳統(tǒng)體育專業(yè)人才培養(yǎng)模式創(chuàng)新研究[J].體育科學進展，2018（4）.

[3]向程冠，熊世桓，王東.淺談高校大數(shù)據(jù)分析人才培養(yǎng)模式[J].中國科技信息，2014（9）.

[4]張海生，張瑜.多學科交叉融合新工科人才培養(yǎng)的現(xiàn)實問題與發(fā)展策略[J].重慶高教研究，2019（6）.

[5]高進鋒.基于大數(shù)據(jù)對我國培養(yǎng)電子商務(wù)人才特征及問題與建議對策的研究[J].商情，2018（28）.

[6]韓霞，朱克實.我國IT人才現(xiàn)狀及培養(yǎng)模式探討[J].中國科技論壇，2007（5）.

[7]蔣云爾.大數(shù)據(jù)引領(lǐng)下的高職教育人才培養(yǎng)模式創(chuàng)新[J].江蘇經(jīng)貿(mào)職業(yè)技術(shù)學院學報，2017（3）.

[8]張蕾，魏立斐.大數(shù)據(jù)時代下“數(shù)據(jù)分析”課程的探索[J].教育教學論壇，2015（25）.

[9]吳勇.應(yīng)用型本科院校計算機專業(yè)“3+1”人才培養(yǎng)模式研究——以閩南科技學院為例[J].吉林省教育學院學報，2017（11）.

[10]王孟欣，周甜甜，張思乾.大數(shù)據(jù)背景下統(tǒng)計學人才培養(yǎng)模式轉(zhuǎn)變的思考[J].統(tǒng)計與管理，2015（10）.

[11]李新友，李戈.高職院校大數(shù)據(jù)人才培養(yǎng)問題研究[J].河北旅游職業(yè)學院學報，2017（1）.

[12]劉廣鐘，李毅，劉旻，等.大數(shù)據(jù)技術(shù)與應(yīng)用課程的內(nèi)容與教學方法研究[J].中國信息技術(shù)教育，2015（10）.

[13]胡瑞娟.大數(shù)據(jù)架構(gòu)下的熱詞發(fā)現(xiàn)與可視化技術(shù)研究[J].軟件工程，2018（5）.

【基金項目】2019年度廣西職業(yè)教育教學改革研究項目“以崗位能力為導(dǎo)向的大數(shù)據(jù)專業(yè)2+1模式課程體系的研究與實踐”（GXGZJG2019B038）

【作者簡介】王文莉（1981— ），女，廣西南寧人，廣西國際商務(wù)職業(yè)技術(shù)學院講師，研究方向：大數(shù)據(jù)和軟件技術(shù)。

（責編 丁 夢）