煤炭交易數(shù)據(jù)分析及可視化表達

楊岸霖 蔡永香 王薈奧 游小玲 胡華科

摘要：我國煤炭行業(yè)經(jīng)過長期的發(fā)展，逐步形成了以煤炭貿(mào)易商鏈接上下游客戶的煤炭供應(yīng)鏈。煤炭交易數(shù)據(jù)反映著煤炭供應(yīng)鏈上下游客戶、產(chǎn)品的供求關(guān)系，對其進行數(shù)據(jù)分析及可視化表達對于煤炭貿(mào)易行業(yè)顯得尤為重要。該文在對煤炭交易及相關(guān)數(shù)據(jù)進行深度分析的基礎(chǔ)上，使用Vue框架及前后端分離開發(fā)技術(shù)，借助Echarts等開源可視化框架，通過各種形式的圖表、地圖等的可視化顯示，從多個角度展示了煤炭交易的實時動態(tài)，并挖掘出了歷史數(shù)據(jù)中蘊含的潛在信息，為政府部門及從事煤炭貿(mào)易的企業(yè)提供了信息支持服務(wù)。

關(guān)鍵詞：煤炭交易;數(shù)據(jù)分析;可視化;Vue

中圖分類號：TP311.52? ? ? 文獻標(biāo)識碼：A

文章編號：1009-3044（2021）27-0017-04

Abstract： After a long period of development， China's coal industry has gradually formed a coal supply chain linking upstream and downstream customers with coal traders. Coal transaction data reflects the supply and demand relationship between upstream and downstream customers and products in the coal supply chain. Data analysis and visual expression are particularly important for the coal trading industry. In this paper， the relevant data of coal trading were deeply analyzed. Based on the Vue framework， the system used the separation of front-end and back-end. With the help of Echarts and other open-source visualization frameworks， various forms of charts and maps can be visualized. It showed the real-time dynamics of coal trading from multiple angles， and unearthed the potential information contained in historical data. This research provides information support services for government departments and companies engaged in coal trading.

Key words： coal trading; data analysis; visualization; Vue

1 背景

數(shù)據(jù)分析及可視化[1]是數(shù)據(jù)賦能決策的重要環(huán)節(jié)，數(shù)據(jù)分析是為了提取有用信息，采用適當(dāng)?shù)慕y(tǒng)計分析方法對數(shù)據(jù)加以匯總、理解并消化，并形成結(jié)論的過程。而數(shù)據(jù)可視化是將數(shù)據(jù)分析的結(jié)果通過可視化圖表的形式展現(xiàn)出來，讓用戶能看到數(shù)據(jù)蘊含的內(nèi)容以及發(fā)展趨勢等[2-3]。數(shù)據(jù)分析與數(shù)據(jù)可視化表達相結(jié)合，在實際生產(chǎn)工作中可以協(xié)助管理者實現(xiàn)科學(xué)決策。如淘寶網(wǎng)將海量的雙十一購物節(jié)當(dāng)天的交易數(shù)據(jù)進行了分析與可視化，在大屏幕中通過各種圖表相結(jié)合的形式直觀地展現(xiàn)了當(dāng)天的平臺交易信息，使得交易平臺、商家、消費者可以更加全面直觀地獲取目前全平臺的交易詳情，改變了以往數(shù)據(jù)單調(diào)復(fù)雜且難以獲取關(guān)鍵信息的狀況。

煤炭能源是我國經(jīng)濟建設(shè)及發(fā)展的重要支柱，煤炭行業(yè)的信息化建設(shè)工作在實現(xiàn)國民經(jīng)濟和社會的可持續(xù)發(fā)展上有著舉足輕重的作用[4]。從商業(yè)角度來看，根據(jù)煤炭交易行情動態(tài)調(diào)整煤炭價格，按照煤炭、煤種在全國的流向合理調(diào)整產(chǎn)業(yè)布局對煤炭行業(yè)的發(fā)展至關(guān)重要[5]。當(dāng)前我國的煤炭市場信息化水平相對較低，雖然市場上已經(jīng)出現(xiàn)了一些煤炭交易平臺[6]，但涉及煤炭交易的相關(guān)數(shù)據(jù)并未受到重視，只是被簡單記錄，尚未得到充分有效利用。煤炭交易數(shù)據(jù)反映著煤炭供應(yīng)鏈上下游客戶、產(chǎn)品的供求關(guān)系及煤炭交易行情信息，若能對其進行深度分析并可視化表達，必將助力煤炭貿(mào)易行業(yè)的發(fā)展[7]。

本文在對煤炭交易數(shù)據(jù)進行了深度分析的基礎(chǔ)上，構(gòu)建了煤炭交易大數(shù)據(jù)分析平臺，在獲取了煤炭行業(yè)上下游產(chǎn)業(yè)鏈相關(guān)信息的基礎(chǔ)上，對賣家信息、買家信息、實時交易訂單信息、煤炭實時價格、煤炭價格比對、煤炭/煤種流向信息等進行了可視化展示，全場景、多角度反映了煤炭交易涉及的各種信息，能為煤炭貿(mào)易企業(yè)進行煤炭價格、運費的動態(tài)調(diào)整提供信息服務(wù)，也能為政府部門調(diào)整產(chǎn)業(yè)布局提供信息支持。

2 數(shù)據(jù)獲取與分析

2.1 數(shù)據(jù)獲取

數(shù)據(jù)主要由兩部分組成，一部分是某煤炭交易網(wǎng)站提供的煤炭交易相關(guān)數(shù)據(jù)，包括煤炭交易訂單、煤炭運單等數(shù)據(jù);另一部分是采用Scrapy網(wǎng)絡(luò)爬蟲技術(shù)從煤炭行業(yè)部門獲取的煤礦位置、煤礦名稱、煤種、煤炭價格等數(shù)據(jù)。

2.2 數(shù)據(jù)分析

煤炭交易數(shù)據(jù)中包含實時、歷史的信息，對兩者進行深入分析能夠獲取煤炭交易的現(xiàn)狀以及煤炭交易發(fā)展的趨勢。對于煤炭貿(mào)易商來說，需要了解煤炭/煤種的流向、煤炭的市場價格波動以及煤炭成交額變化等信息，從而制定出相應(yīng)的市場策略。同時，政府部門也希望獲取這類信息，從而對煤炭交易市場實施有效監(jiān)管，進行合理的上下游產(chǎn)業(yè)布局，促進煤炭行業(yè)有序、健康的發(fā)展。本文針對以上實際需求對煤炭交易數(shù)據(jù)進行了深入分析。