史薔 曾陳萍 鐘昆
摘 要:商業(yè)信用風(fēng)險的管理一直是國內(nèi)外金融界關(guān)注的焦點,而其中高質(zhì)量的信用風(fēng)險管理大數(shù)據(jù)平臺的建立是信用風(fēng)險管理的關(guān)鍵。本文以提供商業(yè)信息及風(fēng)險管理服務(wù)的企業(yè)商安信公司的大數(shù)據(jù)平臺設(shè)計為實例,具體分析如何根據(jù)商業(yè)信用風(fēng)險管理的特點,建立商業(yè)信用風(fēng)險管理大數(shù)據(jù)平臺,并詳細論述其總體架構(gòu):包括認證層、服務(wù)層、消息層和數(shù)據(jù)層,整個平臺采用模塊化功能管理方法,主要包括查詢模塊、統(tǒng)計模塊、監(jiān)蹤模塊、管理模塊、分組模塊、篩選器模塊等6個模塊。
關(guān)鍵詞:商業(yè)信用;信用風(fēng)險;大數(shù)據(jù)技術(shù);基礎(chǔ)平臺建設(shè)
1 引言
商業(yè)信息及信用風(fēng)險管理大數(shù)據(jù)平臺是整合與分析商業(yè)信息的數(shù)據(jù)庫管理軟件以及提供精細化的風(fēng)險量化、集中風(fēng)險管控及決策支持引擎等應(yīng)用軟件的總和[1]。它通常由若干個子功能模塊組成,如統(tǒng)計模塊、分組模塊、查詢模塊、管理模塊等[2]。平臺首先采集數(shù)量巨大且種類繁多海量信息源,同時實現(xiàn)全面處理各種類型的信息[3]的平臺功能,包括數(shù)據(jù)處理、分析與管理、數(shù)據(jù)挖掘、數(shù)據(jù)可視化及數(shù)據(jù)深度應(yīng)用等大數(shù)據(jù)增值功能。
一般情況下,平臺以公開的方式將所處理的信息提供給各級用戶,以此作為商業(yè)信用風(fēng)險評價依據(jù),為用戶提供在線實時風(fēng)險控制的全套解決方案[4]。同時,有些信息作為商業(yè)秘密而被企業(yè)保存起來,企業(yè)非常注重這部分信息其的安全性及保密性[5]。因此,商業(yè)信用風(fēng)險管理大平臺又必須為數(shù)據(jù)提供安全可靠的保障,保證秘密數(shù)據(jù)的完整性和安全性,確保這些數(shù)據(jù)不因被盜竊而遭受經(jīng)濟損失[6]。
隨著世界各國經(jīng)濟與貿(mào)易快速增長,商業(yè)信息數(shù)據(jù)量以指數(shù)級方式增長,用戶的新需求源源不斷地出現(xiàn)[7]。在短時期內(nèi)用戶就可能提出更高的動態(tài)目標需求,這就需要大數(shù)據(jù)平臺具有高度可維護性,易于擴展,便于盡可能地延長平臺的生命周期,避免開發(fā)項目的經(jīng)濟效益受損[8]。由此可見,建立高效的、系統(tǒng)的商業(yè)信息及信用風(fēng)險管理平臺迫在眉睫。因此基于信息技術(shù),通過全面的、整體的系統(tǒng)分析和設(shè)計,建立合理的、完善的商業(yè)信息與信用風(fēng)險管理大數(shù)據(jù)平臺,可使商業(yè)信用風(fēng)險管理更加科學(xué)和有效[9]。
2 平臺的基本組成
任何平臺軟件在開發(fā)設(shè)計與實現(xiàn)之前,開發(fā)人員首先必須要清楚的是將要開發(fā)的軟件需要實現(xiàn)哪些功能,需要做什么與怎么樣去做[10]。即開發(fā)人員在平臺設(shè)計與實現(xiàn)之前必須先進行詳盡的目標平臺的現(xiàn)狀與需求分析,并確切地了解“所要建設(shè)的大數(shù)據(jù)平臺需要解決現(xiàn)狀所存在的哪些問題,必須采用哪些分析與管理方法來達到所需要達到的目標”這一問題[11]。商業(yè)信用及風(fēng)險管理大數(shù)據(jù)平臺應(yīng)用模塊化方法將目標分解為各個子模塊,用來解決用戶各個具體目標的需求[12]。
本平臺是基于上海商安信公司的信息及信用風(fēng)險管理之需求而進行的大數(shù)據(jù)平臺開發(fā)與設(shè)計。商安信是信用信息提供商和信用風(fēng)險管理服務(wù)機構(gòu),具有歐洲信用信息服務(wù)機構(gòu)Credit reform的SI信用風(fēng)險評估體系的全面技術(shù)支持,依托全球24個國家超過6000萬家企業(yè)的信用數(shù)據(jù)資源,結(jié)合中國市場特點,助力企業(yè)識別優(yōu)質(zhì)商業(yè)伙伴、規(guī)避潛在商業(yè)風(fēng)險,推動社會誠信體制的建設(shè)。
商安信以客戶實際需求為導(dǎo)向,提供商業(yè)信用及風(fēng)險管理的支持和優(yōu)化服務(wù),包括信用報告、信用評級、認證咨詢、商賬催收、商業(yè)信息研究、商業(yè)法律顧問、企業(yè)信用風(fēng)險管理培訓(xùn)等。商安信助力海外企業(yè)在中國尋求貿(mào)易伙伴,同時也服務(wù)于中國出口商,運用廣泛的網(wǎng)絡(luò)和國際資源,幫助其有效地拓展國際貿(mào)易,并提高應(yīng)對商業(yè)風(fēng)險的能力。
開發(fā)人員在商安信公司的商業(yè)信用及風(fēng)險管理大數(shù)據(jù)平臺設(shè)計之初,首先對商安信的數(shù)據(jù)管理現(xiàn)狀及其存在的問題進行了全面而系統(tǒng)的研討與分析,詳細報告如下:
大數(shù)據(jù)平臺的開發(fā)人員同時對商安信公司的建設(shè)目標進行了整體的、詳盡的了解與深入的分析:
2.1 總體設(shè)計
商業(yè)信用風(fēng)險有兩個重要特點,即不確定性和損失。因此在進行商業(yè)信用風(fēng)險的分析與管理時,最主要的是量化不確定性的程度,并且具體評估出與每個風(fēng)險相關(guān)的損失程度[13]?;谝陨巷L(fēng)險特點,開發(fā)人員致力于為商安信公司設(shè)計一款能夠提供一站式信用風(fēng)險管理大數(shù)據(jù)平臺,為信用風(fēng)險管理企業(yè)系統(tǒng)地提供基本信息查詢檢索功能、各類維度統(tǒng)計、及對重點關(guān)注對象進行監(jiān)蹤的功能。本平臺采用B/S的軟件體系結(jié)構(gòu),瀏覽器要求采用IE10版本。
2.2 結(jié)構(gòu)說明
應(yīng)用架構(gòu)
平臺系統(tǒng)整體采用前后端分離的方式進行架構(gòu),前端采用VUE,后端采用springboot,便于擴展。
系統(tǒng)整體分為認證層、服務(wù)層、消息層、數(shù)據(jù)層。
(1)認證層:主要對用戶進行錄入、角色管理、權(quán)限分配,鑒權(quán);
(2)服務(wù)層:對外提供查詢服務(wù)、統(tǒng)計服務(wù)、監(jiān)控服務(wù)、分組服務(wù)、篩選器服務(wù);
a)查詢服務(wù)分為模糊查詢、分類查詢、查詢分類信息;
b)統(tǒng)計服務(wù)根據(jù)用戶所選維度進行統(tǒng)計分析;
c)監(jiān)控服務(wù)提供用戶新增監(jiān)控企業(yè)、監(jiān)控預(yù)警服務(wù);
d)分組服務(wù)提供用戶結(jié)果集保存。
(3)消息層:進行預(yù)警通知及其它推送信息,確保消息按序消費。
(4)數(shù)據(jù)層:進行索引同步、IEM數(shù)據(jù)庫及數(shù)據(jù)中心數(shù)據(jù)查詢。
3 總體結(jié)構(gòu)
商安信大數(shù)據(jù)平臺主要分為六大模塊,具體包括:查詢模塊、統(tǒng)計模塊、監(jiān)蹤模塊、管理模塊、分組模塊、篩選器模塊。
用戶通過查詢模塊獲得結(jié)果集,可將結(jié)果集進行分組以便導(dǎo)入其他應(yīng)用模塊進行處理,并且可將我的分組中結(jié)果集通過共享文件夾分享到同一層級的人員。
4 模塊設(shè)計說明
4.1 查詢模塊
用戶登錄系統(tǒng)之后,有兩種檢索模式可選:模糊檢索和條件檢索。
4.1.1 模糊檢索
模糊檢索:可通過輸入單個或多個以空格為分隔符的多關(guān)鍵字/詞組合檢索,并可以對初次檢索的結(jié)果進行二次有效條件檢索。
4.1.2 條件檢索
條件檢索的搜索條件固定,可在給定的檢索條件內(nèi)進行多條件組合篩選。
4.1.3 查詢結(jié)果及明細
通過模糊檢索或條件檢索得出的查詢結(jié)果可進行監(jiān)蹤、分組、編輯、導(dǎo)出,通過對單個公司Id(crefoNo)對數(shù)據(jù)中心進行相關(guān)數(shù)據(jù)明細查詢,顯示相關(guān)公司信息。
4.2 統(tǒng)計模塊
可通過分組管理導(dǎo)入該模塊數(shù)據(jù),進行表格及餅圖、線圖、柱狀圖、及組合圖的展現(xiàn)。
4.3 監(jiān)蹤模塊
信用風(fēng)險管理大數(shù)據(jù)平臺就好比是一道警戒線。企業(yè)的信用風(fēng)險存在于各個業(yè)務(wù)環(huán)節(jié)中,一套完備的信用風(fēng)險管理大數(shù)據(jù)平臺必須具備全程監(jiān)控和的追蹤的功能,以確保整個平臺對外部環(huán)境的變化作出較快的反應(yīng)。
采用定時輪詢的方式,加入監(jiān)蹤到已有API中;從API定時抽取預(yù)警公司相關(guān)信息到預(yù)警池。
通過用戶定義的監(jiān)蹤明細與預(yù)警池中數(shù)據(jù)做比對發(fā)起預(yù)警,并加入消息隊列通知用戶。
4.4 管理模塊
由系統(tǒng)管理員創(chuàng)建合作單位公司相關(guān)信息及管理員相關(guān)信息息,并授予該管理員公司層級的相關(guān)權(quán)限信息(具體分配權(quán)限根據(jù)業(yè)務(wù)條件而定),并授予管理員是否允許向下授權(quán):
1.公司層級管理員可對該公司用戶進行授權(quán)管理。
2.所有人員的操作及消費均會計入相應(yīng)的操作日志及操作日志。
4.5 分組模塊
分組管理模塊中的結(jié)果集可以被選擇性的勾選字段信息,并以excel的形式導(dǎo)出系統(tǒng)。
若需對任何結(jié)果集進行統(tǒng)計,可將該結(jié)果集導(dǎo)出至統(tǒng)計模塊,利用統(tǒng)計模塊自帶的統(tǒng)計方法,或者用戶自定義的方法,用于進一步統(tǒng)計數(shù)據(jù)分析。
4.6 篩選器模塊
通過“查詢模塊”中的“條件篩選”完成創(chuàng)建,當用戶在“查詢模塊”進行“條件篩選”篩選企業(yè)時,可以選擇將該條件篩選保留在篩選器管理模塊中,以便日后再次使用。
篩選條件可修改,可通過篩選器選擇篩選條件運行自動跳轉(zhuǎn)至查詢模塊檢索,并可將篩選后的結(jié)果集導(dǎo)入分組管理模塊。
5 結(jié)論
伴隨著數(shù)字化、信息化的社會發(fā)展,大數(shù)據(jù)平臺、“云計算”等一系列信息技術(shù)的出現(xiàn),轉(zhuǎn)變了人們對傳統(tǒng)信息業(yè)的觀念。從最初的信息互動上的質(zhì)疑,到現(xiàn)在的認可和重視。
以商安信基于大數(shù)據(jù)相關(guān)技術(shù)平臺系統(tǒng)為案例,開發(fā)人員首先對構(gòu)建大數(shù)據(jù)平臺系統(tǒng)進行可行性分析、平臺的業(yè)務(wù)需求和功能需求和非功能需求分析等不同維度的分析。根據(jù)系統(tǒng)需求對系統(tǒng)進行了設(shè)計,包括平臺架構(gòu)設(shè)計,對平臺的應(yīng)用進行了介紹。研究了基于大數(shù)據(jù)技術(shù)的商業(yè)信息和信用風(fēng)險管理系統(tǒng)的理論模型,構(gòu)建基于大數(shù)據(jù)技術(shù)實現(xiàn)信用風(fēng)險管理系統(tǒng)的六個功能子模塊,滿足大數(shù)據(jù)環(huán)境下商業(yè)信用風(fēng)險管理平臺對業(yè)務(wù)和功能方面的需求。
應(yīng)用大數(shù)據(jù)管理與分析平臺來有效支持企業(yè)從大數(shù)據(jù)中整理和積累知識,并為企業(yè)用戶提供知識的智能搜索,提升企業(yè)對于大數(shù)據(jù)的應(yīng)用水平和方法。商安信基于大數(shù)據(jù)平臺的信用風(fēng)險管理系統(tǒng)的成功實施和運行,可以給其它相關(guān)企業(yè)的基于大數(shù)據(jù)平臺的風(fēng)控系統(tǒng)建設(shè)提供實踐參考,也可以給其它公司的大數(shù)據(jù)平臺建設(shè)提供借鑒。
參考文獻
[1] 趙剛.大數(shù)據(jù):技術(shù)與應(yīng)用實踐指南[M].北京:電子工業(yè)出版社,2013.
[2] Junqueira? F.Zookpeeper:Distributed? Process? Coordination[M].O'Reilly Media,2013:210-333.
[3] 盧湘江,李向榮,宴子.My? SQL高級配置和管理[M].北京:清華大學(xué)出版社,2001:8-9.
[4] Dean? J.Ghemawat? S.Map? Reduce:Simplified? Data? Processing? on? Large Clusters[J].Communications? of? the? ACM,2008,51(1):107-113.
[5] Han? Jiawei,Micheline? K.數(shù)據(jù)挖掘概念與技術(shù)[M].范明,孟小峰,譯.北京:機械工業(yè)出版社,2007.
[6] Rajaraman? A,Ullman? J? D.大數(shù)據(jù):互聯(lián)網(wǎng)大規(guī)模數(shù)據(jù)挖掘與分布式處理[M].王斌,譯.北京:人民郵電出版社,2012.
[7] Gantz? F,Reinsel? D.The? 2011? Digital? Universe? Study:Extracting Value? from? Chaos.[EB/OL].[2012-07-26].www.emc.com/collateral/demos/microsites/emc-digitaluniverse-2011/index.htm.
[8] Fouche? P.A? competitive? intelligence? implementation? mode [Dissertation].South? Africa? University? of? South? Africa,2006.
[9] Pamela? Johns,Doris? C.Van? Doren.Competitive? intelligence? in? service marketing:A? new? approach? with? practical? application[J].Marketing intelligence? &? Planning,2010(3):538-550.
[22] Saayman? A,Pienaar,De? Pelsmacker? P,et? al.Competitive? intelligence: construct? exploration,validation? and? equivalence[C]//Aslib? Proceedings. Emerald? Group? Publishing? Limited,2008,60(4):383-411.
[10] Craig? S.Fleisher.Using? open? source? data? in? developing? competitive and? marketing? intelligence[J].European? Jouranl? of? Marketing,2008(7): 852-866.
[11] Ebner? K,Buhnen? T,Urbach? N.Think? Big? with? Big? Data:Identifying Suitable? Big? Data? Strategies? in? Corporate? Environments[C]//System Sciences(HICSS),2014? 47th? Hawaii? International? Conference? on? ? Publication? Year:2014,Page(s):3748-3757.
[12] Big? data:the? next? frontier? for? innovation,competition? and productivity[R].Mc? Kinsey? Global? Institute,2011.
[13] Labrinidis? A,Jagadish? H? V.Challenges? and? opportunities? with? big data[J].Proceedings? of? the? VLD? B? Endowment,2012,5(12):2032-2033.