考慮電網(wǎng)調(diào)峰需求的工業(yè)園區(qū)主動(dòng)配電系統(tǒng)調(diào)度學(xué)習(xí)優(yōu)化

唐 昊 劉 暢 楊 明 湯必強(qiáng) 許 丹 呂 凱

近年來,由于能源危機(jī)和生存環(huán)境的不斷惡化,各國(guó)政府紛紛出臺(tái)政策鼓勵(lì)和推進(jìn)新能源發(fā)展.隨著光伏(Photovoltaic,PV)、風(fēng)電等新能源的大規(guī)模應(yīng)用,配電網(wǎng)的分布式特性愈發(fā)明顯,電網(wǎng)調(diào)峰形勢(shì)愈加嚴(yán)峻[1],傳統(tǒng)配電網(wǎng)逐漸演變成為可對(duì)分布式發(fā)電、柔性負(fù)荷和儲(chǔ)能三者進(jìn)行主動(dòng)控制的主動(dòng)配電系統(tǒng)[2?3].如何有效利用需求響應(yīng)資源以及對(duì)新能源、儲(chǔ)能、柔性負(fù)荷等分布式調(diào)峰資源進(jìn)行協(xié)調(diào)優(yōu)化控制,提高新能源利用率,緩解電網(wǎng)調(diào)峰壓力,保持配電系統(tǒng)運(yùn)行的經(jīng)濟(jì)性,增強(qiáng)電力系統(tǒng)的可靠性和可控性,是主動(dòng)配電系統(tǒng)研究的重要發(fā)展趨勢(shì)[4?5].

國(guó)內(nèi)外學(xué)者通過不同的建模與求解方法對(duì)各類主動(dòng)配電系統(tǒng)的運(yùn)行、管理、優(yōu)化等問題展開了大量研究.文獻(xiàn)[6]在考慮分布式能源特性的基礎(chǔ)上建立了主動(dòng)配電系統(tǒng)優(yōu)化調(diào)度模型,并提出了基于智能單粒子優(yōu)化算法的求解方法,實(shí)現(xiàn)完整調(diào)度周期內(nèi)主動(dòng)配電系統(tǒng)優(yōu)化調(diào)度策略求解.文獻(xiàn)[7]建立了分布式電源和儲(chǔ)能系統(tǒng)的多目標(biāo)協(xié)調(diào)規(guī)劃模型,并采用了改進(jìn)的生物地理學(xué)優(yōu)化算法對(duì)主動(dòng)配電系統(tǒng)多目標(biāo)調(diào)度問題進(jìn)行求解,但以上文獻(xiàn)均未考慮到柔性負(fù)荷對(duì)調(diào)度問題的影響.文獻(xiàn)[8]建立了考慮分布式能源和柔性負(fù)荷的主動(dòng)配電系統(tǒng)調(diào)度規(guī)劃模型,并提出了一種免疫二叉螢火蟲算法來求解多目標(biāo)優(yōu)化問題的最優(yōu)策略,但沒有考慮儲(chǔ)能裝置和柔性負(fù)荷的協(xié)調(diào)調(diào)度作用.文獻(xiàn)[9]提出一種新的多周期柔性負(fù)荷與儲(chǔ)能系統(tǒng)協(xié)調(diào)調(diào)度模型,并通過改進(jìn)的粒子群算法對(duì)主動(dòng)配電系統(tǒng)經(jīng)濟(jì)調(diào)度問題進(jìn)行求解.上述文獻(xiàn)均是在預(yù)測(cè)數(shù)據(jù)的基礎(chǔ)上對(duì)主動(dòng)配電系統(tǒng)的運(yùn)行優(yōu)化問題進(jìn)行研究,并未考慮到系統(tǒng)中新能源出力和各類負(fù)荷變化過程的隨機(jī)動(dòng)態(tài)特性對(duì)系統(tǒng)運(yùn)行效率的影響.但新能源出力及各類負(fù)荷需求的不確定性是普遍存在且不可避免的,當(dāng)實(shí)際值與日前預(yù)測(cè)值相差較大時(shí),若以預(yù)測(cè)數(shù)據(jù)為基礎(chǔ)確定相應(yīng)的優(yōu)化控制策略,將難以保證主動(dòng)配電系統(tǒng)的長(zhǎng)期經(jīng)濟(jì)運(yùn)行.

另外,隨著新能源滲透率的日益增加以及用電環(huán)節(jié)的不斷智能化,主動(dòng)配電系統(tǒng)源荷雙側(cè)的不確定性不斷加大,電力系統(tǒng)調(diào)度也不斷向智能化發(fā)展,傳統(tǒng)的基于模型的靜態(tài)優(yōu)化算法變得越發(fā)不適用[10?11].在智能電網(wǎng)背景下,利用人工智能技術(shù)為電力系統(tǒng)動(dòng)態(tài)調(diào)度問題提供智能化解決方案是當(dāng)前調(diào)度計(jì)劃研究的重點(diǎn)[12?13].

目前,主動(dòng)配電系統(tǒng)的優(yōu)化研究主要針對(duì)居民用戶和商業(yè)用戶,對(duì)工業(yè)用戶的研究較少,且較少考慮需求側(cè)調(diào)峰問題[14].為此,儲(chǔ)能系統(tǒng)和柔性負(fù)荷作為需求側(cè)調(diào)峰資源參與電力調(diào)度問題越發(fā)值得關(guān)注.文獻(xiàn)[15]提出了一種儲(chǔ)能系統(tǒng)削峰填谷的變參數(shù)功率差控制方法,實(shí)現(xiàn)在滿足商業(yè)園區(qū)運(yùn)行經(jīng)濟(jì)性的同時(shí)降低自身負(fù)荷峰谷差的目標(biāo).文獻(xiàn)[16]構(gòu)建了供需側(cè)聯(lián)合隨機(jī)調(diào)度模型,并通過仿真驗(yàn)證了柔性負(fù)荷的調(diào)峰效益.文獻(xiàn)[17]論證了對(duì)工業(yè)園區(qū)內(nèi)的柔性負(fù)荷進(jìn)行控制能夠降低用電高峰期用戶集中用電給電網(wǎng)帶來的調(diào)峰壓力,提高大電網(wǎng)運(yùn)行的安全性和穩(wěn)定性.

因此,在上述研究基礎(chǔ)上,本文研究了工業(yè)園區(qū)主動(dòng)配電系統(tǒng)實(shí)時(shí)響應(yīng)大電網(wǎng)系統(tǒng)下發(fā)電隨機(jī)調(diào)峰需求的優(yōu)化調(diào)度問題.首先,本文根據(jù)VRB 儲(chǔ)能裝置的充放電特性建立其數(shù)學(xué)模型,并采用三段式安全充放電控制策略求解模型;然后,本文考慮了多類型柔性負(fù)荷,并針對(duì)各類柔性負(fù)荷特性分別進(jìn)行了建模處理;最后,考慮到當(dāng)前電力系統(tǒng)調(diào)度問題一般為離散時(shí)段決策,并且各個(gè)決策時(shí)刻間具有時(shí)序相關(guān)性,將考慮電網(wǎng)調(diào)峰隨機(jī)需求和源荷雙側(cè)隨機(jī)性的工業(yè)園區(qū)主動(dòng)配電系統(tǒng)內(nèi)多類型柔性負(fù)荷與儲(chǔ)能裝置協(xié)同動(dòng)態(tài)調(diào)度問題建成離散時(shí)間馬爾科夫決策過程(Discrete time Markov decision process,DTMDP)模型,并采用學(xué)習(xí)優(yōu)化方法對(duì)該動(dòng)態(tài)調(diào)度優(yōu)化問題進(jìn)行策略求解.

在系統(tǒng)實(shí)際運(yùn)行過程中,可根據(jù)觀測(cè)狀態(tài)及最優(yōu)策略選擇最優(yōu)的控制行動(dòng),實(shí)時(shí)制定出各類型柔性負(fù)荷調(diào)整計(jì)劃和儲(chǔ)能裝置充放電計(jì)劃,從而在發(fā)、供、用電平衡協(xié)調(diào)基礎(chǔ)上緩解電網(wǎng)調(diào)峰壓力并實(shí)現(xiàn)系統(tǒng)安全經(jīng)濟(jì)運(yùn)行的目標(biāo).

1 工業(yè)園區(qū)主動(dòng)配電系統(tǒng)模型

1.1 工業(yè)園區(qū)主動(dòng)配電系統(tǒng)

本文研究的是由工業(yè)園區(qū)調(diào)度中心、屋頂光伏、VRB 儲(chǔ)能系統(tǒng)以及多類型用戶負(fù)荷等組成的工業(yè)園區(qū)主動(dòng)配電系統(tǒng).其中,園區(qū)調(diào)度中心作為協(xié)調(diào)電網(wǎng)調(diào)控中心與工業(yè)用戶的中間機(jī)構(gòu),可實(shí)現(xiàn)系統(tǒng)內(nèi)整個(gè)負(fù)荷群的宏觀整體協(xié)調(diào)響應(yīng)以及微觀靈活分散自治[18],進(jìn)而可以調(diào)控需求側(cè)配電系統(tǒng)內(nèi)各類調(diào)峰資源以滿足大電網(wǎng)實(shí)時(shí)調(diào)峰需求,同時(shí)實(shí)現(xiàn)系統(tǒng)的供需平衡以及經(jīng)濟(jì)運(yùn)行,系統(tǒng)結(jié)構(gòu)如圖1 所示.

圖1 工業(yè)園區(qū)主動(dòng)配電系統(tǒng)結(jié)構(gòu)模型Fig.1 Structure model of active distribution system in industrial park

主動(dòng)配電系統(tǒng)在任意時(shí)刻t都需要滿足實(shí)時(shí)供需平衡,即:

表1 部分變量符號(hào)Table 1 Partial variable symbols

本文將該系統(tǒng)中總負(fù)荷按需求管理模式分為剛性負(fù)荷和柔性負(fù)荷[1],其中工業(yè)園區(qū)內(nèi)剛性負(fù)荷屬于不可調(diào)節(jié)的用電需求,應(yīng)優(yōu)先被滿足;園區(qū)內(nèi)柔性負(fù)荷屬于可控負(fù)荷,常被用于參與系統(tǒng)緊急調(diào)峰的需求響應(yīng)[19].現(xiàn)將柔性負(fù)荷按響應(yīng)特性分為可削減負(fù)荷、可轉(zhuǎn)移負(fù)荷和可平移負(fù)荷三種類型.其中,可削減負(fù)荷指可根據(jù)需要對(duì)用電量進(jìn)行部分或全部削減的負(fù)荷;可轉(zhuǎn)移負(fù)荷在一個(gè)調(diào)度周期內(nèi)總用電量不變,但各時(shí)段用電量可靈活調(diào)節(jié);可平移負(fù)荷受生產(chǎn)流程約束,其用電曲線只能在不同時(shí)段間平移[18].各類負(fù)荷需求可表示為:

本文園區(qū)調(diào)度中心采取基于合同的直接負(fù)荷控制策略,考慮的柔性負(fù)荷只限于與園區(qū)調(diào)度中心簽訂合同服從其調(diào)度指令的負(fù)荷.在調(diào)度周期內(nèi),調(diào)度中心對(duì)負(fù)荷具有直接調(diào)控權(quán),可直接控制各類柔性負(fù)荷在時(shí)序上重新調(diào)度,并在調(diào)度結(jié)束后根據(jù)負(fù)荷調(diào)整量給予一定補(bǔ)償[20].

1.2 不確定性隨機(jī)變量建模

由于環(huán)境和用戶行為的隨機(jī)特性,新能源出力與各類負(fù)荷實(shí)際需求變化既具有一定統(tǒng)計(jì)特征,同時(shí)也具有隨機(jī)不確定性[21?22].本文涉及到的隨機(jī)變量分別為PV 出力、各類負(fù)荷需求和電網(wǎng)調(diào)峰需求.

1.2.1 建立PV 出力模型

在系統(tǒng)實(shí)際運(yùn)行過程中,可以根據(jù)氣象數(shù)據(jù)預(yù)測(cè)得到次日的PV 出力預(yù)測(cè)曲線.設(shè)根據(jù)預(yù)測(cè)得到的t時(shí)刻PV 出力為,由于預(yù)測(cè)準(zhǔn)確性有限,在t時(shí)刻實(shí)際PV 出力可視為預(yù)測(cè)值與隨機(jī)不確定部分的疊加,表達(dá)式為:

本文將PV 出力隨機(jī)不確定部分的最大范圍離散為?Npv ～Npv共 2Npv+1 個(gè)等級(jí),并將該不確定量隨時(shí)間的變化過程用連續(xù)時(shí)間馬爾科夫過程近似描述[23?24].即假設(shè)狀態(tài)等級(jí)的逗留時(shí)間服從參數(shù)為的指數(shù)分布,在各時(shí)刻下的轉(zhuǎn)移概率服從以自身狀態(tài)為中心的離散高斯分布.在t時(shí)刻PV實(shí)際出力可近似描述為:

1.2.2 建立各類負(fù)荷需求模型

在系統(tǒng)實(shí)際運(yùn)行過程中,可以通過對(duì)環(huán)境以及用戶歷史用電行為預(yù)測(cè)得到t時(shí)刻各類負(fù)荷需求功率.但由于各類負(fù)荷用電隨機(jī)性大,影響預(yù)測(cè)的準(zhǔn)確性,在t時(shí)刻各類負(fù)荷實(shí)際需求功率與預(yù)測(cè)值存在偏差(其中由于可平移負(fù)荷一般為固定流程生產(chǎn)線,故本文不考慮其隨機(jī)性),則t時(shí)刻剛性負(fù)荷、可削減負(fù)荷及可轉(zhuǎn)移負(fù)荷實(shí)際需求功率可分別表示為:

類似地,各類負(fù)荷需求隨機(jī)不確定部分隨時(shí)間的變化過程也可看作高斯—馬爾科夫過程[25?27],將各類負(fù)荷隨機(jī)不確定部分的最大范圍區(qū)間分別離散為相應(yīng)的狀態(tài)等級(jí)?Nrl～Nrl、?Ncu～Ncu、?Nsh～Nsh,則在t時(shí)刻相應(yīng)狀態(tài)等級(jí)下的各類負(fù)荷實(shí)際需求功率可分別描述如下:

1.2.3 建立電網(wǎng)調(diào)峰需求模型

電網(wǎng)日負(fù)荷峰谷差嚴(yán)重影響著電力系統(tǒng)穩(wěn)定性和發(fā)電效率,峰谷差越大,發(fā)電效率越低.調(diào)度日內(nèi),電網(wǎng)實(shí)時(shí)下發(fā)相應(yīng)調(diào)峰指令以期減小日負(fù)荷峰谷差,從而提高電力系統(tǒng)運(yùn)行穩(wěn)定性、實(shí)現(xiàn)節(jié)能減排.為此,本文通過對(duì)系統(tǒng)內(nèi)VRB 儲(chǔ)能裝置和多類型柔性負(fù)荷等需求側(cè)調(diào)峰資源進(jìn)行協(xié)調(diào)控制以滿足電網(wǎng)調(diào)峰需求,緩解電網(wǎng)實(shí)時(shí)調(diào)峰壓力.

由于受環(huán)境氣候以及用戶行為等諸多隨機(jī)因素影響,電網(wǎng)實(shí)際下發(fā)給工業(yè)園區(qū)的調(diào)峰指令存在著相應(yīng)的隨機(jī)不確定部分,任意時(shí)刻t電網(wǎng)實(shí)際調(diào)峰需求可表示為:

類似地,將電網(wǎng)調(diào)峰需求隨機(jī)不確定部分隨時(shí)間的變化過程建模為連續(xù)馬爾科夫過程,并將隨機(jī)不確定部分的最大范圍離散為?Npeak ～Npeak共2Npeak+1個(gè)等級(jí),則在t時(shí)刻相應(yīng)狀態(tài)等級(jí)下的電網(wǎng)實(shí)際調(diào)峰需求可描述為:

其中,?Ppe表示t時(shí)刻電網(wǎng)調(diào)峰指令不確定部分離散化后的最小單位功率,狀態(tài)等級(jí)···0,1,···,Npeak}.

1.3 VRB 儲(chǔ)能模型

VRB 的電氣模型有很多種,為了充分反映其充放電過程中的端電壓、端電流以及SOC 等的動(dòng)態(tài)變化特性,本文采用的VRB 等效電路如圖2 所示[28?29].

圖2 VRB 等效電路圖Fig.2 Equivalent circuit model of VRB

圖中,Ud和Vs分別為VRB 外部端電壓和內(nèi)核電壓,Id和Ip分別為充放電電流和泵損電流,R1和R2為等效內(nèi)阻,Rf和Ce分別為寄生損耗和電極電容.

根據(jù)VRB 等效電路圖,可得到其非線性數(shù)學(xué)模型如下:

在系統(tǒng)實(shí)際運(yùn)行中,需盡量將VRB 儲(chǔ)能裝置的SOC 控制在0.2～0.8 之間以保證VRB 工作于安全區(qū)內(nèi),防止出現(xiàn)過充過放現(xiàn)象,提高電池充放電效率.本文以VRB 的端電壓和SOC 作為安全充放電切換控制的約束條件,采用先恒流再恒壓最后涓流充放電的三階段式控制策略求解所建立的VRB 非線性數(shù)學(xué)模型.其中,三段式安全充放電控制策略的給定值可分別表示如下:

在VRB 儲(chǔ)能裝置的三段式充電過程中,端電壓Ud、端電流Id及SOC 隨時(shí)間的變化特性如圖3所示.

圖3 采用三段式充放電策略時(shí)VRB 的充電曲線Fig.3 Charging curve using strategy three-phase of VRB

在一個(gè)周期內(nèi),VRB 儲(chǔ)能裝置約束如下[30]:

1)充放電功率約束:

2)端電壓約束:

3)荷電狀態(tài)(剩余容量)約束:

4)儲(chǔ)能裝置始末荷電狀態(tài)一致約束:

2 調(diào)度優(yōu)化模型及求解

為制定各類柔性負(fù)荷調(diào)整計(jì)劃和儲(chǔ)能系統(tǒng)充放電計(jì)劃,所求調(diào)度優(yōu)化策略需考慮到任意決策時(shí)刻所有可能出現(xiàn)的源荷出力隨機(jī)情況.為此,本文將系統(tǒng)決策過程建立為相應(yīng)的DTMDP 模型,該調(diào)度優(yōu)化模型包括狀態(tài)、行動(dòng)、轉(zhuǎn)移代價(jià)及優(yōu)化目標(biāo)函數(shù).

2.1 調(diào)度優(yōu)化模型

將一天時(shí)間等分為K+1 個(gè)決策周期,采用等周期決策方式,決策時(shí)刻為tk,其中k ∈{0,1,···,K},?tk表示決策周期k的持續(xù)時(shí)間.

系統(tǒng)行動(dòng)包括當(dāng)前狀態(tài)下VRB 儲(chǔ)能裝置的充放電動(dòng)作avrb∈Dvrb={?1,0,1},可削減負(fù)荷削減動(dòng)作acu∈Dcu={0,1,···,Nacu},可轉(zhuǎn)移負(fù)荷轉(zhuǎn)移動(dòng)作ash∈Dsh={?Nash,···,0,1,···,Nash}以及可平移負(fù)荷平移動(dòng)作ahs∈Dhs={0,1,···,Nahs}.系統(tǒng)行動(dòng)向量為a=(avrb,acu,ash,ahs)∈D,系統(tǒng)行動(dòng)集為D=Dvrb×Dcu×Dsh×Dhs.

定義系統(tǒng)策略π為狀態(tài)空間–行動(dòng)集的映射,即對(duì)于任意狀態(tài)sk,均可根據(jù)策略 π選擇行動(dòng)ask=π(sk)用以控制系統(tǒng)運(yùn)行.

2.2 目標(biāo)函數(shù)及代價(jià)

本文的優(yōu)化目標(biāo)是在考慮系統(tǒng)功率平衡、儲(chǔ)能裝置等各類約束情況下,通過學(xué)習(xí)優(yōu)化的方法制定多類型柔性負(fù)荷調(diào)整計(jì)劃和儲(chǔ)能系統(tǒng)充放電計(jì)劃,以緩解電網(wǎng)調(diào)峰壓力并降低系統(tǒng)日運(yùn)行代價(jià).

假設(shè)當(dāng)前時(shí)間到達(dá)決策時(shí)刻tk,通過觀測(cè)可知系統(tǒng)處于當(dāng)前狀態(tài)sk,在該狀態(tài)下選擇行動(dòng),經(jīng)過一個(gè)決策周期后,系統(tǒng)狀態(tài)轉(zhuǎn)移到下一決策周期的狀態(tài)sk+1,并產(chǎn)生轉(zhuǎn)移代價(jià)ck,由此得到一個(gè)狀態(tài)轉(zhuǎn)移過程為 〈sk,ask,sk+1,ck〉.其中,在決策周期k內(nèi)系統(tǒng)運(yùn)行過程中產(chǎn)生的各類代價(jià)可分別表示如下:

在決策周期k內(nèi)通過執(zhí)行行動(dòng)ak狀態(tài)轉(zhuǎn)移過程中產(chǎn)生的運(yùn)行代價(jià)ck可表示為:

主動(dòng)配電系統(tǒng)調(diào)度呈一定周期性,應(yīng)使每個(gè)調(diào)度周期末VRB 儲(chǔ)能裝置剩余容量等級(jí)與調(diào)度周期起始時(shí)刻一致并達(dá)到期望的容量等級(jí),故將末狀態(tài)代價(jià)設(shè)置為如下所示的差值函數(shù)cvrb(sK+1):

定義系統(tǒng)在策略π下以初始狀態(tài)為s0的有限時(shí)段內(nèi)優(yōu)化性能準(zhǔn)則為Vπ(s0),可表示如下:

其中,ck取決于狀態(tài)sk及根據(jù)策略π選取的動(dòng)作ask.系統(tǒng)的優(yōu)化目標(biāo)為在策略集 ? 中找到一個(gè)最優(yōu)策略π?,使得在該策略下系統(tǒng)平均日運(yùn)行代價(jià)最低,即π?=arg minπ∈?V π(s0).

2.3 學(xué)習(xí)優(yōu)化過程

針對(duì)考慮源荷雙側(cè)隨機(jī)性的工業(yè)園區(qū)主動(dòng)配電系統(tǒng)的動(dòng)態(tài)調(diào)度問題,本文采用強(qiáng)化學(xué)習(xí)方法對(duì)該問題進(jìn)行策略求解.其中,Q 學(xué)習(xí)算法是一種模型無關(guān)的基于強(qiáng)化學(xué)習(xí)的隨機(jī)動(dòng)態(tài)規(guī)劃方法,適用于求解隨機(jī)環(huán)境下的最優(yōu)控制策略[31].為此,本文采用基于模擬退火的有限時(shí)段Q 學(xué)習(xí)算法對(duì)所建調(diào)度優(yōu)化模型進(jìn)行策略求解,具體求解過程如下:

步驟1.初始化Q值表,樣本軌道總數(shù)L,單條樣本軌道決策周期數(shù)K+1,學(xué)習(xí)率αl,學(xué)習(xí)率更新系數(shù)ηα,模擬退火溫度Ttemp及模擬退火系數(shù)ηtemp,并令當(dāng)前樣本軌道數(shù)l=0;

步驟2.k=0,并隨機(jī)初始化系統(tǒng)狀態(tài)sk;

步驟3.根據(jù)Q值表和貪婪策略,選取在當(dāng)前狀態(tài)sk下對(duì)VRB 儲(chǔ)能裝置和各類柔性負(fù)荷的貪婪行動(dòng)agreedy=arg minask∈D Q(sk,ask),同時(shí)隨機(jī)選取有效行動(dòng)arand.若

步驟4.執(zhí)行當(dāng)前所選行動(dòng)ask,根據(jù)所建系統(tǒng)模型觀察下一決策周期對(duì)應(yīng)的系統(tǒng)狀態(tài)sk+1,并計(jì)算在決策周期k內(nèi)通過執(zhí)行行動(dòng)ask狀態(tài)轉(zhuǎn)移過程中產(chǎn)生的代價(jià)ck,根據(jù)式(28)更新Q值表,同時(shí)更新策略,即通過不斷更新各狀態(tài)-行動(dòng)對(duì)對(duì)應(yīng)的Q值和選取各狀態(tài)下最小的Q值對(duì)應(yīng)的儲(chǔ)能裝置充放電方案和各類柔性負(fù)荷調(diào)整方案作為該狀態(tài)下新的行動(dòng),達(dá)到更新策略的目的.并令k:=k+1,返回步驟3;

步驟5.執(zhí)行當(dāng)前狀態(tài)sK所選行動(dòng)asK,并計(jì)算在決策周期K內(nèi)通過執(zhí)行行動(dòng)asK狀態(tài)轉(zhuǎn)移過程中產(chǎn)生的代價(jià)cK及末狀態(tài)代價(jià)cvrb(sK+1),并根據(jù)式(29)更新Q 值表,同時(shí)更新策略,并令l:=l+1,αl:=ηα ?αl;

步驟6.若l

3 算例分析

3.1 算例描述

在本文算例中,根據(jù)某市各類負(fù)荷、PV 相關(guān)數(shù)據(jù)特征[21,32],擬合典型的工業(yè)園區(qū)主動(dòng)配電系統(tǒng)內(nèi)PV 出力、總負(fù)荷需求以及各類柔性負(fù)荷需求等隨機(jī)因素的相應(yīng)統(tǒng)計(jì)預(yù)測(cè)曲線如圖4、圖5 所示.其中,柔性負(fù)荷占園區(qū)內(nèi)總體負(fù)荷需求的比例為16%,可削減、可轉(zhuǎn)移、可平移3 類柔性負(fù)荷的比例分別為10 %、4.8 %、1.2 %.全天負(fù)荷整體平穩(wěn),但在早、中、晚各有一個(gè)低谷,且早晚低谷相對(duì)更低,呈現(xiàn)明顯的日峰夜谷特點(diǎn).在PV 發(fā)電裝置附近配備有容量為3 MWh 的VRB 儲(chǔ)能裝置,單個(gè)VRB 儲(chǔ)能單元相關(guān)參數(shù)如表2 所示[33].設(shè)置本文動(dòng)態(tài)調(diào)度問題的決策周期為24 個(gè)時(shí)段,每個(gè)時(shí)段的持續(xù)時(shí)間為1 h.

圖4 工業(yè)園區(qū)內(nèi)PV 出力與總負(fù)荷需求預(yù)測(cè)曲線Fig.4 Prediction curves of PV and loads demand in industrial parks

圖5 工業(yè)園區(qū)內(nèi)各類柔性負(fù)荷典型日曲線Fig.5 Prediction curves of multi-type flexible loads in industrial parks

表2 VRB 模型參數(shù)設(shè)置表Table 2 Parameters of VRB

本文參照江蘇省工業(yè)用戶峰谷分時(shí)電價(jià)標(biāo)準(zhǔn)設(shè)定工業(yè)園區(qū)主動(dòng)配電系統(tǒng)內(nèi)各時(shí)段的具體電價(jià),其中,高峰時(shí)段8:00—12:00 和17:00—21:00,電價(jià)為0.9947 元/kWh;低谷時(shí)段0:00—8:00,電價(jià)為0.2989 元/kWh;剩余時(shí)段的平電價(jià)為0.5968 元/kWh[34].

根據(jù)第2.1 節(jié)可知,本文考慮到的系統(tǒng)狀態(tài)變量和控制變量種類較多,仿真算例中所選取的狀態(tài)?行動(dòng)對(duì)個(gè)數(shù)更是多達(dá)7 558 272,由此形成的策略空間龐大,難以通過傳統(tǒng)數(shù)值求解方法進(jìn)行求解,因此本文采用學(xué)習(xí)優(yōu)化方法對(duì)該動(dòng)態(tài)調(diào)度問題進(jìn)行策略求解.

3.2 仿真結(jié)果分析

1)學(xué)習(xí)優(yōu)化過程分析

本文以一天24 小時(shí)為調(diào)度周期,充分利用各類柔性負(fù)荷和儲(chǔ)能裝置等可調(diào)度資源對(duì)工業(yè)園區(qū)主動(dòng)配電系統(tǒng)進(jìn)行調(diào)度協(xié)調(diào)控制,并采用基于模擬退火Q 的學(xué)習(xí)算法對(duì)該系統(tǒng)的動(dòng)態(tài)調(diào)度優(yōu)化問題進(jìn)行求解.在學(xué)習(xí)過程中,通過Q 值更新公式不斷更新Q 值表,得到Q 學(xué)習(xí)優(yōu)化策略.設(shè)一條樣本軌道為系統(tǒng)一日內(nèi)運(yùn)行過程,每經(jīng)過20 000 條樣本軌道,對(duì)所得策略進(jìn)行一次評(píng)估,并設(shè)置策略評(píng)估過程中評(píng)估樣本軌道數(shù)為3 000,對(duì)評(píng)估樣本軌道結(jié)果取均值以估算系統(tǒng)日運(yùn)行代價(jià),圖6 分別給出了傳統(tǒng)Q 學(xué)習(xí)、雙Q 學(xué)習(xí)、模擬退火Q 學(xué)習(xí)以及模擬退火雙Q 學(xué)習(xí)的日平均代價(jià)學(xué)習(xí)優(yōu)化曲線,各學(xué)習(xí)優(yōu)化方法的收斂時(shí)間分別為54 820 s、14 803 s、44 508 s和11 154 s.從圖6 中可以看出各優(yōu)化算法下系統(tǒng)日運(yùn)行代價(jià)均隨著學(xué)習(xí)步數(shù)的增加而逐漸下降,并最終趨于收斂,其中,雙Q 學(xué)習(xí)收斂速度較Q 學(xué)習(xí)快很多,這是因?yàn)殡pQ 學(xué)習(xí)是雙重學(xué)習(xí),可避免最大值帶來的偏差影響,收斂更快,但Q 學(xué)習(xí)較雙Q的優(yōu)化效果更勝一籌;同時(shí)模擬退火Q 學(xué)習(xí)算法可利用模擬退火思想解決探索和利用的平衡問題,進(jìn)而可提高收斂速度和算法性能,相較于傳統(tǒng)Q 學(xué)習(xí)的收斂速度更快.在實(shí)際應(yīng)用中,可綜合考慮時(shí)間和效果進(jìn)行相應(yīng)優(yōu)化算法的選取和實(shí)驗(yàn).

圖6 不同學(xué)習(xí)優(yōu)化算法下的系統(tǒng)總學(xué)習(xí)優(yōu)化過程曲線Fig.6 The optimal curve of the system under different learning optimization algorithm

圖7 給出了基于模擬退火的Q 學(xué)習(xí)過程的策略性能曲線,學(xué)習(xí)曲線為每一條樣本軌道所記錄的日運(yùn)行代價(jià)的平均值,填充區(qū)間為這3 000 條樣本軌道所得數(shù)據(jù)在各點(diǎn)處的標(biāo)準(zhǔn)差區(qū)間,填充區(qū)域面積越小,則表明不同樣本軌道得出的結(jié)果越接近,學(xué)習(xí)穩(wěn)定性越好.由學(xué)習(xí)曲線可以看出系統(tǒng)日運(yùn)行代價(jià)均隨著學(xué)習(xí)步數(shù)的增加而逐漸下降,并趨于收斂,系統(tǒng)日運(yùn)行平均代價(jià)較學(xué)習(xí)優(yōu)化前降低28.7%,顯著提高了系統(tǒng)運(yùn)行效益;同時(shí)學(xué)習(xí)過程中不同樣本軌道得到的數(shù)據(jù)波動(dòng)并不大且隨著學(xué)習(xí)步數(shù)的增加在不斷減小直至趨于較小的穩(wěn)定值.綜上所述,本文采用的基于模擬退火法的Q 學(xué)習(xí)算法所求得的策略可以穩(wěn)定、有效的適用于工業(yè)園區(qū)型主動(dòng)配電系統(tǒng)的優(yōu)化研究.

圖7 系統(tǒng)學(xué)習(xí)優(yōu)化過程的策略性能曲線Fig.7 The strategic performance curve of the system learning optimization process

圖8 給出了電網(wǎng)調(diào)峰需求未完成度的學(xué)習(xí)曲線,經(jīng)過學(xué)習(xí)優(yōu)化,調(diào)峰需求未完成度逐漸降低并最終穩(wěn)定在11.1% 左右;圖9 為學(xué)習(xí)優(yōu)化過后,各時(shí)段內(nèi)電網(wǎng)調(diào)峰需求完成情況,明顯可以看出在用電高峰時(shí)段實(shí)際調(diào)峰量完全滿足其調(diào)峰需求,在用電低谷時(shí)段實(shí)際調(diào)峰量也基本完成了電網(wǎng)調(diào)峰需求.例如在5～7 時(shí)段,系統(tǒng)實(shí)際調(diào)峰量較電網(wǎng)調(diào)峰需求量相差較大,主要是因?yàn)閺牧璩恐两?大電網(wǎng)調(diào)峰需求均趨向于填谷,系統(tǒng)內(nèi)儲(chǔ)能裝置SOC 已臨近極值,故這段時(shí)間調(diào)峰效果稍差.

圖8 調(diào)峰學(xué)習(xí)優(yōu)化曲線Fig.8 The optimal curve of peak operation

圖9 各時(shí)段電網(wǎng)調(diào)峰指令完成情況示意圖Fig.9 The completion of peak adjustment instruction

圖10 給出的是在隨機(jī)初始SOC 情況下末狀態(tài)代價(jià)的優(yōu)化曲線,從圖10 可以看出,通過學(xué)習(xí)優(yōu)化,末狀態(tài)代價(jià)可收斂在0 左右,即末狀態(tài)儲(chǔ)能剩余容量等級(jí)可達(dá)到期望值;圖11 給出在不同初始荷電狀態(tài)情況下,所得優(yōu)化策略在一條樣本軌道運(yùn)行中系統(tǒng)內(nèi)儲(chǔ)能裝置SOC 的變化情況.可以看出在不同初始荷電狀態(tài)下,所得優(yōu)化策略均可將荷電狀態(tài)在夜間降至較低水平,且趨向于在低電價(jià)時(shí)段選取充電或閑置,而在用電高峰時(shí)段趨向于放電或閑置,以獲取因電價(jià)差值產(chǎn)生的收益,緩解大電網(wǎng)的調(diào)峰壓力,進(jìn)而提高工業(yè)園區(qū)主動(dòng)配電系統(tǒng)運(yùn)行的經(jīng)濟(jì)性并提升需求側(cè)調(diào)峰效果.

圖10 末代價(jià)學(xué)習(xí)優(yōu)化曲線Fig.10 The optimal curve of final cost

圖11 不同初始荷電狀態(tài)下各時(shí)段SOC 變化情況Fig.11 Changing process of SOC under different initial values

圖12 為學(xué)習(xí)優(yōu)化前后需求側(cè)負(fù)荷曲線,由圖12可以看出,與原負(fù)荷曲線相比,學(xué)習(xí)優(yōu)化策略對(duì)工業(yè)園區(qū)主動(dòng)配電系統(tǒng)有一定的調(diào)峰效果,學(xué)習(xí)優(yōu)化前后系統(tǒng)總負(fù)荷特征如表3 所示.由表3 可知,學(xué)習(xí)優(yōu)化前系統(tǒng)負(fù)荷峰谷差為2 689 kW,通過學(xué)習(xí)優(yōu)化對(duì)系統(tǒng)內(nèi)多類型柔性負(fù)荷選取控制行動(dòng),使峰谷差減少為2 535 kW,系統(tǒng)峰谷差降低5.7 %.上述結(jié)果說明通過學(xué)習(xí)優(yōu)化不但可以滿足電網(wǎng)調(diào)峰需求,而且可以在一定程度上降低系統(tǒng)自身峰谷差,有利于主動(dòng)配電系統(tǒng)安全經(jīng)濟(jì)運(yùn)行.

圖12 學(xué)習(xí)優(yōu)化前后系統(tǒng)負(fù)荷曲線Fig.12 The curves of load before and after learning optimization in the system

表3 學(xué)習(xí)優(yōu)化前后系統(tǒng)總負(fù)荷特征Table 3 The characteristic of load before and after learning optimization in the system

圖13 為學(xué)習(xí)優(yōu)化后系統(tǒng)內(nèi)3 類典型柔性負(fù)荷在調(diào)度日內(nèi)各時(shí)段下的實(shí)際調(diào)整量,可以看出可削減負(fù)荷的削減量在負(fù)荷用電高峰期明顯高于用電低谷期,可轉(zhuǎn)移負(fù)荷趨向于將自身負(fù)荷用電從用電高峰轉(zhuǎn)移到用電低谷,可平移負(fù)荷由于自身特性和限制只會(huì)小范圍向后平移.通過對(duì)各類柔性負(fù)荷的動(dòng)態(tài)調(diào)整可在一定程度上減緩電網(wǎng)調(diào)峰壓力,并在一定程度上實(shí)現(xiàn)峰電谷用.

圖13 學(xué)習(xí)優(yōu)化后各時(shí)段典型柔性負(fù)荷調(diào)整量Fig.13 Adjustment of multi-type flexible loads after optimization

2)不同調(diào)度模式下的優(yōu)化結(jié)果對(duì)比分析

在相同配置情況下,將VRB 儲(chǔ)能裝置與柔性負(fù)荷協(xié)同優(yōu)化調(diào)度模式記為模式1;將僅考慮VRB儲(chǔ)能裝置的優(yōu)化調(diào)度模式記為模式2;將僅考慮柔性負(fù)荷的優(yōu)化調(diào)度模式記為模式3;將既不考慮VRB 儲(chǔ)能裝置也不考慮柔性負(fù)荷的優(yōu)化調(diào)度模式記為模式4.4 種模式對(duì)應(yīng)于系統(tǒng)不同的物理結(jié)構(gòu),其策略維度也不同,故分別對(duì)應(yīng)不同的策略,分別記為策略1,2,3,4.現(xiàn)分別將其他模式對(duì)應(yīng)的優(yōu)化效果與模式1 進(jìn)行比較,在各優(yōu)化調(diào)度模式下主動(dòng)配電系統(tǒng)運(yùn)行過程中產(chǎn)生的日運(yùn)行代價(jià)和調(diào)峰完成情況對(duì)比如圖14 所示,各項(xiàng)代價(jià)指標(biāo)的具體數(shù)值如表4 所示.

圖14 不同調(diào)度模式下的調(diào)峰效果比較圖Fig.14 Comparison effect of peak operation under different dispatching modes

表4 不同調(diào)度模式下的相關(guān)指標(biāo)Table 4 Related indexes under different dispatching modes

由表4 數(shù)據(jù)可以看出各模式下系統(tǒng)優(yōu)化效果由好到差分別為:模式1、模式3、模式2、模式4.由圖14 可以看出,模式1 下的電網(wǎng)調(diào)峰需求完成度明顯優(yōu)于其他3 種模式,且模式1 下的系統(tǒng)日平均運(yùn)行代價(jià)最低:模式2 的調(diào)峰完成度較差,主要是因?yàn)樵谀Ｊ? 下電網(wǎng)調(diào)峰需求由VRB 儲(chǔ)能裝置充放電來完成,然而各時(shí)刻下充放電功率與儲(chǔ)能裝置實(shí)際容量有關(guān),無法動(dòng)態(tài)調(diào)節(jié),在一定程度上受到很大限制,而模式1 和模式3 中電網(wǎng)調(diào)峰需求可通過調(diào)節(jié)各類典型柔性負(fù)荷來完成,可動(dòng)態(tài)調(diào)節(jié),更有利于大電網(wǎng)調(diào)峰任務(wù)的完成.上述結(jié)論充分說明了本文引入VRB 儲(chǔ)能裝置與多類型柔性負(fù)荷進(jìn)行協(xié)同優(yōu)化調(diào)度的有效性.

由圖15 可以看出,模式1 與模式2 的策略相比,負(fù)荷需求有明顯差異,在負(fù)荷用電高峰時(shí)段模式1 的負(fù)荷需求明顯低于模式2,而在負(fù)荷用電低谷時(shí)段模式1 的負(fù)荷用電需求又高于模式2,說明了策略1 通過在不同時(shí)段對(duì)各類型柔性負(fù)荷選取不同行動(dòng),即用電高峰選取削負(fù)荷行動(dòng),并將部分可轉(zhuǎn)移、可平移負(fù)荷由高峰用電移至低谷,在一定程度上實(shí)現(xiàn)了削峰填谷,發(fā)揮了柔性負(fù)荷的調(diào)峰作用.

圖15 不同調(diào)度模式下負(fù)荷優(yōu)化結(jié)果比較圖Fig.15 Comparison diagram of load optimal results under different dispatching modes

以模式1 選取的VRB 儲(chǔ)能裝置容量配置為基準(zhǔn),分別求解不同儲(chǔ)能裝置容量配置下對(duì)應(yīng)的優(yōu)化調(diào)度方案,經(jīng)優(yōu)化得到不同容量占比下系統(tǒng)運(yùn)行過程中的各項(xiàng)代價(jià)比較情況如圖16 所示.由圖16 可知,隨著儲(chǔ)能裝置容量的增加,系統(tǒng)日運(yùn)行總代價(jià)緩慢降低,并且未完成電網(wǎng)調(diào)峰需求產(chǎn)生的調(diào)峰代價(jià)以及柔性負(fù)荷的補(bǔ)償代價(jià)逐漸減小,儲(chǔ)能裝置充放電過程產(chǎn)生的損耗也逐漸增加,說明了在允許范圍內(nèi)適當(dāng)增加儲(chǔ)能裝置的容量配置可以提高電網(wǎng)調(diào)峰需求完成度和降低系統(tǒng)日運(yùn)行代價(jià).

圖16 不同儲(chǔ)能容量占比下的各項(xiàng)代價(jià)比較圖Fig.16 Comparison of costs under different proportion of energy storage capacity

以模式1 設(shè)置的各類柔性負(fù)荷占比為基準(zhǔn),分別求解不同柔性負(fù)荷占比下的優(yōu)化調(diào)度方案,所得系統(tǒng)運(yùn)行過程中產(chǎn)生的各項(xiàng)代價(jià)指標(biāo)的變化趨勢(shì)如圖17 所示.由圖17 可明顯看出,隨著柔性負(fù)荷的占比增加,系統(tǒng)運(yùn)行過程中因調(diào)節(jié)各類柔性負(fù)荷需補(bǔ)償?shù)拇鷥r(jià)逐漸增加,而因未完成電網(wǎng)調(diào)峰需求產(chǎn)生的調(diào)峰代價(jià)先是逐漸降低直至柔性負(fù)荷占比為所設(shè)基準(zhǔn)值的90%左右,此時(shí)若繼續(xù)增加柔性負(fù)荷占比調(diào)峰代價(jià)則呈上升趨勢(shì),并且系統(tǒng)總體運(yùn)行代價(jià)趨勢(shì)與調(diào)峰代價(jià)趨勢(shì)基本一致.

圖17 不同柔性負(fù)荷占比下的各項(xiàng)代價(jià)比較圖Fig.17 Comparison of costs under different proportion of flexible load

根據(jù)光伏及負(fù)荷統(tǒng)計(jì)預(yù)測(cè)曲線,在模式1 結(jié)構(gòu)下,將源荷雙側(cè)隨機(jī)因素作為系統(tǒng)狀態(tài)和不作為系統(tǒng)狀態(tài)的兩種優(yōu)化求解方式分別記為方案1 和方案2.將方案2 與方案1 所得的優(yōu)化策略在隨機(jī)環(huán)境下進(jìn)行評(píng)估比較,結(jié)果如表5 和圖18 所示.

從圖18 可以看出總體上各時(shí)段內(nèi)方案1 的優(yōu)化策略對(duì)應(yīng)的電網(wǎng)調(diào)峰需求未完成量要小于方案2,且方案1 在用電高峰時(shí)段下的調(diào)峰未完成量均趨于0,故方案1 的調(diào)峰效果明顯好于方案2.由表5可知方案1 下的系統(tǒng)日運(yùn)行代價(jià)相比于方案2 更低,且其調(diào)峰完成度也高于方案2.以上現(xiàn)象均說明了本文采用的將源荷雙側(cè)隨機(jī)因素作狀態(tài)的方案1與不將隨機(jī)因素作狀態(tài)的方案2 相比,其所得優(yōu)化策略能夠更加經(jīng)濟(jì)地適用于實(shí)際的隨機(jī)環(huán)境,并可進(jìn)一步提高電網(wǎng)調(diào)峰需求完成度.

表5 不同方案下的相關(guān)指標(biāo)Table 5 Related indexes under different projects

圖18 不同方案下的調(diào)峰需求未完成量比較圖Fig.18 Unfinished amount of peak operation demand under different projects

3)學(xué)習(xí)優(yōu)化策略分析

在所得優(yōu)化策略下對(duì)一條樣本軌道進(jìn)行學(xué)習(xí),可以觀測(cè)得到該條仿真樣本軌道中各時(shí)段PV 發(fā)電功率、各類負(fù)荷需求、電網(wǎng)調(diào)峰需求和電池荷電狀態(tài)等實(shí)際狀態(tài)值,以及相應(yīng)狀態(tài)下采取的最優(yōu)控制行動(dòng)如圖19 所示,表6 記錄了調(diào)度日內(nèi)該樣本典型狀態(tài)和行動(dòng).

圖19 優(yōu)化策略下各時(shí)段行動(dòng)選取情況Fig.19 Choice of action pairs under optimal policy

由圖19 和表6 可知,VRB 儲(chǔ)能裝置在低電價(jià)時(shí)更趨向于選取充電動(dòng)作來儲(chǔ)存電量以備即將到來的負(fù)荷用電高峰,在高電價(jià)時(shí)則傾向于選取放電動(dòng)作,利用存儲(chǔ)的電能為負(fù)荷供電,以降低在用電高峰購(gòu)電代價(jià)以及負(fù)荷高峰期的用電需求,獲取“低價(jià)儲(chǔ)電,高價(jià)賣電”的經(jīng)濟(jì)收益,這種低儲(chǔ)高放方式不但可以賺取電價(jià)差的利潤(rùn)而且可以緩解電網(wǎng)調(diào)峰壓力;可削減負(fù)荷在用電高峰期傾向于大幅度的削減負(fù)荷用電,在用電低谷期則不削減負(fù)荷用電;可轉(zhuǎn)移負(fù)荷傾向于將負(fù)荷從高峰用電轉(zhuǎn)移到低谷用電;可平移負(fù)荷向后平移2 個(gè)時(shí)段,使時(shí)間跨度由3:00—15:00 變?yōu)?:00—17:00,避免了夜間工作為工人帶來的不便利.例如,在4 時(shí)低負(fù)荷、低電價(jià)的情況選擇儲(chǔ)能裝置的動(dòng)作為充電,可削減負(fù)荷的動(dòng)作為不削減,可轉(zhuǎn)移負(fù)荷的動(dòng)作為轉(zhuǎn)入,可平移負(fù)荷的動(dòng)作是向后平移.

表6 優(yōu)化策略下部分狀態(tài)行動(dòng)Table 6 Partial state-action pairs under optimal policy

針對(duì)模式1,2,3 所得相應(yīng)的調(diào)度優(yōu)化策略1,2,3,可得到各策略在同一樣本軌道下各時(shí)段的調(diào)峰完成情況如圖20 所示,可以看出模式1 下該樣本的調(diào)峰未完成量明顯小于模式2、3,且其在負(fù)荷高峰期的調(diào)峰未完成量均為0,完全滿足電網(wǎng)在用電高峰期的調(diào)峰需求.表7 給出了各優(yōu)化策略在該樣本軌道下產(chǎn)生的各項(xiàng)代價(jià)指標(biāo),根據(jù)表中數(shù)據(jù)分析可知模式1 下的日運(yùn)行費(fèi)用也明顯小于其他模式,說明了在單條樣本下,考慮多類型柔性負(fù)荷與儲(chǔ)能裝置協(xié)同調(diào)度所得策略的優(yōu)化效果更好,進(jìn)一步證明了本文優(yōu)化方法的有效性.

表7 優(yōu)化策略下不同模式的相關(guān)指標(biāo)Table 7 Related indexes under different modes in optimal policy

圖20 優(yōu)化策略下不同模式的調(diào)峰需求未完成量比較圖Fig.20 Unfinished amount of peak operation demand under different modes in optimal policy

4 結(jié)論

本文研究的是考慮電網(wǎng)調(diào)峰需求的工業(yè)園區(qū)主動(dòng)配電系統(tǒng)內(nèi)動(dòng)態(tài)經(jīng)濟(jì)調(diào)度優(yōu)化問題,并在此基礎(chǔ)上考慮了源荷雙側(cè)不確定因素,將工業(yè)園區(qū)主動(dòng)配電系統(tǒng)調(diào)度問題建立為馬爾科夫決策過程模型,采用模擬退火Q 學(xué)習(xí)算法對(duì)該動(dòng)態(tài)問題進(jìn)行策略求解.仿真結(jié)果表明,考慮多類型柔性負(fù)荷和儲(chǔ)能系統(tǒng)協(xié)同調(diào)度相比于傳統(tǒng)單一模式可顯著降低電網(wǎng)調(diào)峰需求未完成度以及提高系統(tǒng)運(yùn)行效益,并且學(xué)習(xí)優(yōu)化所得控制策略能夠在考慮源荷隨機(jī)情況下降低系統(tǒng)的運(yùn)行成本,降低自身峰谷差,可在很大程度上滿足電網(wǎng)調(diào)峰需求,有利于主動(dòng)配電系統(tǒng)經(jīng)濟(jì)運(yùn)行和提高電力系統(tǒng)運(yùn)行穩(wěn)定性.

由于本文考慮的系統(tǒng)狀態(tài)和行動(dòng)種類多,若后續(xù)考慮將系統(tǒng)狀態(tài)和行動(dòng)連續(xù)化以獲取更加精確的模型和更高精度的控制效果,可能會(huì)導(dǎo)致維數(shù)災(zāi)問題,探索解決該類問題的方法十分值得進(jìn)一步研究;同時(shí),由于系統(tǒng)故障或人為行為等因素帶來的系統(tǒng)物理結(jié)構(gòu)的動(dòng)態(tài)變化,考慮系統(tǒng)結(jié)構(gòu)動(dòng)態(tài)切換場(chǎng)景下的策略優(yōu)化問題也是值得深入研究的一個(gè)方向;此外,隨著新能源滲透率和柔性負(fù)荷規(guī)模的日益增大,考慮在源荷互動(dòng)、多方參與的復(fù)雜電力市場(chǎng)交易環(huán)境下系統(tǒng)內(nèi)各部分利益間的博弈問題以及多類型市場(chǎng)機(jī)制對(duì)系統(tǒng)調(diào)度優(yōu)化的影響也是有意義的研究方向.