劉莉莉

（中國能源建設集團遼寧電力勘測設計院有限公司，遼寧 沈陽 110179）

0 引 言

隨著新能源技術的快速發(fā)展，新能源的接入規(guī)模不斷擴大，導致電力系統(tǒng)運行方式和結(jié)構發(fā)生深刻變化。這種變化帶來了一些新的問題，如電力系統(tǒng)的穩(wěn)定性、安全性和經(jīng)濟性等有所下降。其中最為突出的是新能源發(fā)電的不穩(wěn)定性和間歇性，對電力系統(tǒng)的影響最為嚴重。為解決這些問題，需要研究新能源接入下電力系統(tǒng)儲能容量的規(guī)劃方法。目前，國內(nèi)外學者已經(jīng)提出了一些方法來規(guī)劃電力系統(tǒng)儲能容量。文獻[1]基于山體重力儲能的形式，構建了一種以儲能成本最小為目標的容量規(guī)劃模型，以規(guī)劃風光儲聯(lián)合發(fā)電系統(tǒng)的儲能容量。文獻[2]以儲能凈收益總和最大化為目標，進行梯次電池儲能容量的配置，以延長儲能壽命。但這些方法仍存在一些問題，如計算復雜度高、規(guī)劃時間長或無法適應系統(tǒng)運行狀態(tài)的變化等。基于此，文章提出一種新能源接入下電力系統(tǒng)儲能容量自適應規(guī)劃方法，以適應系統(tǒng)運行狀態(tài)的變化，提高儲能容量的利用率和系統(tǒng)穩(wěn)定性。

1 構建新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型

由于風力、光伏等新能源大規(guī)模并網(wǎng)時具有波動與隨機性，嚴重影響儲能裝置運行的穩(wěn)定性，需要通過儲能容量規(guī)劃來抑制新能源負荷的波動[3]?，F(xiàn)有的新能源接入下電力系統(tǒng)儲能容量規(guī)劃方法具有計算復雜度高、無法適應電力系統(tǒng)運行變化等問題，應用效果較差，因此文章提出一種新能源接入下電力系統(tǒng)儲能容量自適應規(guī)劃方法。簡單來說，儲能容量的自適應規(guī)劃就是利用強化學習算法的函數(shù)近似結(jié)構來處理儲能容量規(guī)劃過程中遇到的復雜動態(tài)變化問題，避免求解復雜的微分方程，以提高儲能容量規(guī)劃的效率和適應性[4]。因此，需要構建一個儲能容量規(guī)劃模型，并選取適當?shù)哪繕撕瘮?shù)和約束條件，文章主要以儲能的出力滿足度和儲能的更換次數(shù)最優(yōu)為目標函數(shù)。新能源接入下電力系統(tǒng)儲能出力滿足度是儲能實際出力達到預期出力的時間比，表達式為

式中：η表示新能源接入下電力系統(tǒng)儲能的出力滿足度；δi,t表示儲能在t時刻第i種天氣類別下實際出力值是否達到預期出力值的判別系數(shù)，δi,t=0 表示實際出力值未達到預期出力值，δi,t=1 表示實際出力值達到預期出力值；N表示新能源接入下電力系統(tǒng)運行過程中所遇天氣類別的總數(shù)；M表示新能源接入下電力系統(tǒng)運行過程中儲能出力的總時長；T表示儲能的日均出力時長。儲能更換次數(shù)指新能源接入下電力系統(tǒng)儲能模塊達到使用壽命時進行更換的次數(shù)，計算公式為

式中：μ表示新能源接入下電力系統(tǒng)儲能模塊的更換頻次；qi表示第i種天氣類別下電力系統(tǒng)儲能模塊的整體儲電量；y表示新能源接入下電力系統(tǒng)的運行年限；pi表示第i種天氣類別下新更換的儲能模塊使用壽命；H表示新能源接入下電力系統(tǒng)儲能模塊的放電深度；L表示儲能在整個生命周期內(nèi)循環(huán)使用的容量；C表示儲能在整個生命周期內(nèi)循環(huán)使用的次數(shù)。綜合式（1）與式（2），構建新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型，即

式中：f表示新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型。已知新能源接入下電力系統(tǒng)主要由新能源模塊、電能轉(zhuǎn)換器模塊和混合儲能模塊組成，因此在電力系統(tǒng)運行過程中，存在能量平衡關系，即

式中：P0表示新能源接入下電力系統(tǒng)儲能模塊的充放電功率；P1表示儲能模塊中超級電容的充放電功率；P2表示儲能模塊中蓄電池的充放電功率；P3表示新能源接入下電力系統(tǒng)中儲能模塊與新能源模塊的輸出功率總和；P4表示新能源接入下電力系統(tǒng)中新能源模塊輸出功率。根據(jù)式（1），在新能源接入下的電力系統(tǒng)正常運行過程中，儲能模塊的輸出功率是影響系統(tǒng)充放電能力的重要因素[5]。因此，要想對電力系統(tǒng)儲能容量進行自適應規(guī)劃，就需要將儲能模塊的輸出功率作為儲能容量規(guī)劃模型的約束條件，表達式為

式中：Qn表示新能源接入下電力系統(tǒng)中第n個儲能的充放電功率；Qnmax表示新能源接入下電力系統(tǒng)中第n個儲能的最高功率。

文章基于新能源接入下電力系統(tǒng)儲能規(guī)劃的實時性與復雜性等特征，構建了一個多目標約束的儲能容量規(guī)劃模型，以得到儲能規(guī)劃的最優(yōu)策略。

2 基于深度強化學習算法求解模型

通過構建自適應規(guī)劃模型，優(yōu)化算法，有助于提高電力系統(tǒng)的供電可靠性和穩(wěn)定性。文章構建的新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型是一個由多目標函數(shù)組成的優(yōu)化模型，且儲能容量的規(guī)劃過程是一個較為復雜的動態(tài)過程，如果采用常規(guī)算法求解模型，不僅難以保障模型的求解精度，而且求解速度極慢，因此文章采用基于深度強化學習（Deep Reinforcement Learning，DRL）算法來求解儲能容量規(guī)劃模型[6-7]。由于新能源發(fā)電和電力負荷等因素具有動態(tài)性和不確定性，因此儲能容量規(guī)劃模型要能夠自適應地應對各種變化。深度強化學習算法通過大量的數(shù)據(jù)訓練和學習，能夠提取系統(tǒng)內(nèi)在的特征和規(guī)律，從而有效應對不同場景的變化。DRL 是深度學習與強化學習的結(jié)合，兼具強大的感知能力與決策能力，在復雜問題求解中具有優(yōu)越的自適應性，因此文章通過DRL 算法來求解新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型。首先，將文章構建的新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型轉(zhuǎn)化為馬爾可夫決策過程。該過程是DRL 算法實現(xiàn)迭代的關鍵，不僅與電力系統(tǒng)儲能當前狀態(tài)有關，還關系著儲能的下一個狀態(tài)。其次，對DRL 算法的迭代次數(shù)、離散時間間隙、狀態(tài)等參數(shù)進行初始化設置，計算回報值，以推動電力系統(tǒng)儲能規(guī)劃的馬爾可夫決策過程達到下一狀態(tài)，得到規(guī)劃的序列軌跡，并將其存儲在經(jīng)驗池中用于下次迭代使用。最后，綜合考慮DRL算法折扣因子的未來回報值，確定收斂是否結(jié)束，公式為

式中：B表示未來狀態(tài)回報值；τ表示當前狀態(tài)回報值；α表示動作變量；σ表示折扣因子；W(β)表示期望，β表示狀態(tài)變量。在利用DRL 算法求解新能源接入下電力系統(tǒng)儲能容量規(guī)劃模型時，如果馬爾可夫決策結(jié)果收斂到最小回報值，則可以結(jié)束算法，并將當前結(jié)果作為最優(yōu)方案輸出。

新能源接入電力系統(tǒng)儲能容量規(guī)劃是一個多階段動態(tài)決策優(yōu)化的過程。為避免發(fā)生維數(shù)災等問題，文章采用具有函數(shù)近似結(jié)構的DRL 算法對模型進行求解。該算法通過在迭代過程中逐漸逼近最優(yōu)控制解，實現(xiàn)對儲能容量的動態(tài)規(guī)劃，并提高了新能源接入電力系統(tǒng)儲能容量規(guī)劃的自適應性。

3 電力系統(tǒng)儲能容量自適應規(guī)劃方法發(fā)展方向

未來的研究中，將結(jié)合文章設計內(nèi)容，基于歷史數(shù)據(jù)、季節(jié)性變化、天氣情況以及社會經(jīng)濟因素等進行綜合分析，捕捉電力需求的短期和長期波動規(guī)律。利用大數(shù)據(jù)分析技術建立更精確的電力需求預測模型，并引入機器學習提高預測模型的準確性和實時性，提高電力需求變化趨勢預測效果，為儲能容量的規(guī)劃提供有力的數(shù)據(jù)支持。由于不同種類的儲能設備（如鋰電池、液流電池、飛輪儲能等）具有不同能量密度、功率密度、充放電效率以及循環(huán)壽命等特點，因此在選擇儲能設備時，應根據(jù)電力系統(tǒng)的實際需求進行性能匹配。對于快速響應場合，選擇功率密度較高的儲能設備；對于長時間儲能場合，選擇能量密度較高的儲能設備。此外，還需要考慮儲能設備的成本、安全性、環(huán)保性等因素，進行綜合評估和優(yōu)化。

4 結(jié) 論

文章提出的新能源接入下電力系統(tǒng)儲能容量自適應規(guī)劃方法具有顯著的實用價值和發(fā)展?jié)摿?。通過建立目標函數(shù)、引入深度強化學習算法，并根據(jù)實際情況自動調(diào)整儲能容量，使電力系統(tǒng)實現(xiàn)儲能的均衡充放電，提高了系統(tǒng)的可靠性和穩(wěn)定性。該方法的應用解決了電力系統(tǒng)中新能源的波動性與隨機性帶來的問題，優(yōu)化了儲能系統(tǒng)的運行效果。實驗證實，采用該方法進行電力系統(tǒng)儲能容量規(guī)劃時，能夠有效降低儲能容量的波動率，在確保儲能壽命的前提下，提高儲能系統(tǒng)的使用效率。同時，該方法能夠適應新能源接入的變化條件，為電力系統(tǒng)提供了更強的適應性和可持續(xù)發(fā)展的能力。未來，研究者要考慮更多因素對儲能容量進行調(diào)整，如電力需求的波動性、儲能設備的性能匹配等，以提高儲能容量規(guī)劃的精確性和適應性。