本發(fā)明涉及配電網(wǎng)工程應(yīng)用，具體涉及一種基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法及裝置。
背景技術(shù)：
1、隨著現(xiàn)貨市場(chǎng)與輔助服務(wù)市場(chǎng)的建設(shè)與完善，虛擬電廠(chǎng)的發(fā)展處于邀約型向市場(chǎng)型過(guò)渡階段。當(dāng)前，多個(gè)新型市場(chǎng)主體組成聯(lián)盟以?vpp?的形式參與市場(chǎng)，可提高其競(jìng)爭(zhēng)力和經(jīng)濟(jì)效益。
2、然而，受限于單一的盈利模式，虛擬電廠(chǎng)難以常態(tài)化持續(xù)運(yùn)營(yíng)，年利用小時(shí)數(shù)較低，因此，亟需市場(chǎng)化手段引導(dǎo)虛擬電廠(chǎng)積極參與系統(tǒng)調(diào)節(jié)，從不同時(shí)間尺度、不同交易產(chǎn)品開(kāi)展對(duì)虛擬電廠(chǎng)盈利模式與控制方法的研究很有必要。
技術(shù)實(shí)現(xiàn)思路
1、為了克服上述缺陷，本發(fā)明提出了一種基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法及裝置。
2、第一方面，提供一種基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法，所述基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法包括：
3、基于各虛擬電廠(chǎng)的夏利普值求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型，并在各虛擬電廠(chǎng)中確定虛擬電廠(chǎng)聯(lián)盟；
4、利用多智能體強(qiáng)化學(xué)習(xí)法求解所述虛擬電廠(chǎng)聯(lián)盟對(duì)應(yīng)的預(yù)先構(gòu)建的虛擬電廠(chǎng)聚合商優(yōu)化模型，得到虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)參與需求響應(yīng)和日前調(diào)峰的動(dòng)作策略；
5、利用所述虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)參與需求響應(yīng)和日前調(diào)峰的動(dòng)作策略對(duì)虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)進(jìn)行協(xié)同優(yōu)化控制；
6、其中，所述動(dòng)作策略包括：出力計(jì)劃和電價(jià)，所述多智能體強(qiáng)化學(xué)習(xí)法的執(zhí)行過(guò)程中，狀態(tài)空間包括各虛擬電廠(chǎng)的觀察信息。
7、優(yōu)選的，所述預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型包括：以虛擬電廠(chǎng)運(yùn)行總成本最小為目標(biāo)的第一目標(biāo)函數(shù)及其對(duì)應(yīng)的第一約束條件。
8、進(jìn)一步的，所述基于各虛擬電廠(chǎng)的夏利普值求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型，并在各虛擬電廠(chǎng)中確定虛擬電廠(chǎng)聯(lián)盟，包括：
9、采用q值法求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型，其中，所述采用q值法求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型的過(guò)程中，q值為虛擬電廠(chǎng)的夏利普值，獎(jiǎng)勵(lì)函數(shù)為所述第一目標(biāo)函數(shù)。
10、進(jìn)一步的，所述虛擬電廠(chǎng)的夏利普值如下：
11、
12、上式中，為第i個(gè)虛擬電廠(chǎng)的夏利普值，為虛擬電廠(chǎng)聯(lián)盟集合，為虛擬電廠(chǎng)數(shù)量，為虛擬電廠(chǎng)聯(lián)盟集合中加入第i個(gè)虛擬電廠(chǎng)后虛擬電廠(chǎng)聯(lián)盟集合完成需求響應(yīng)與日前調(diào)峰所分得收益，為虛擬電廠(chǎng)聯(lián)盟集合完成需求響應(yīng)與日前調(diào)峰所分得收益。
13、進(jìn)一步的，所述虛擬電廠(chǎng)聯(lián)盟集合完成需求響應(yīng)與日前調(diào)峰所分得收益如下：
14、
15、上式中，為日虛擬電廠(chǎng)聚合商組織參與需求響應(yīng)的收益提成比例，為日虛擬電廠(chǎng)聚合商組織參與需求響應(yīng)的收益，為日虛擬電廠(chǎng)聚合商組織參與調(diào)峰市場(chǎng)的收益抽成比例，為日虛擬電廠(chǎng)聚合商組織參與調(diào)峰市場(chǎng)的收益。
16、進(jìn)一步的，所述第一目標(biāo)函數(shù)如下：
17、
18、上式中，為第一目標(biāo)函數(shù)值，分別為第i個(gè)虛擬電廠(chǎng)的設(shè)備運(yùn)維成本、向虛擬電廠(chǎng)聚合商支付的購(gòu)電成本、售電成本、分?jǐn)偟奶摂M電廠(chǎng)聚合商運(yùn)營(yíng)成本、夏利普值。
19、進(jìn)一步的，所述第i個(gè)虛擬電廠(chǎng)的設(shè)備運(yùn)維成本、向虛擬電廠(chǎng)聚合商支付的購(gòu)電成本、售電成本、分?jǐn)偟奶摂M電廠(chǎng)聚合商運(yùn)營(yíng)成本如下：
20、
21、
22、
23、
24、上式中，為調(diào)度周期，為第i個(gè)虛擬電廠(chǎng)中分布式電源數(shù)量，為第i個(gè)虛擬電廠(chǎng)第j個(gè)分布式電源機(jī)組安裝成本，為第i個(gè)虛擬電廠(chǎng)第j個(gè)分布式電源額定功率，為機(jī)組的年度利用小時(shí)數(shù)，為利息，為機(jī)組預(yù)計(jì)使用壽命，為t時(shí)刻第i個(gè)虛擬電廠(chǎng)第j個(gè)分布式電源額定出力，為第i個(gè)虛擬電廠(chǎng)第j個(gè)分布式電源的運(yùn)行系數(shù)，為時(shí)間間隔，為第i個(gè)虛擬電廠(chǎng)t時(shí)刻購(gòu)售電狀態(tài)，為第i個(gè)虛擬電廠(chǎng)t時(shí)刻購(gòu)申報(bào)的購(gòu)售電計(jì)劃，為t時(shí)刻虛擬電廠(chǎng)聚合商向虛擬電廠(chǎng)發(fā)布的日前購(gòu)電價(jià)格，為第i個(gè)虛擬電廠(chǎng)t時(shí)刻實(shí)時(shí)出力，為第i個(gè)虛擬電廠(chǎng)t時(shí)刻校核狀態(tài)，為虛擬電廠(chǎng)聚合商向虛擬電廠(chǎng)發(fā)布的日前購(gòu)電價(jià)格上限，為t時(shí)刻虛擬電廠(chǎng)聚合商向虛擬電廠(chǎng)發(fā)布的日前售電價(jià)格，為虛擬電廠(chǎng)聚合商向虛擬電廠(chǎng)發(fā)布的日前售電價(jià)格下限，為過(guò)網(wǎng)費(fèi)單價(jià)，為虛擬電廠(chǎng)聚合商繳納的偏差電費(fèi)加權(quán)值，為虛擬電廠(chǎng)實(shí)際每日購(gòu)售電量。
25、進(jìn)一步的，所述第一約束條件如下：
26、
27、
28、上式中，、分別為第i個(gè)虛擬電廠(chǎng)第j個(gè)分布式電源額定出力的最小值和最大值，、分別為第i個(gè)虛擬電廠(chǎng)第j個(gè)可控負(fù)荷額定出力的最小值和最大值，為第i個(gè)虛擬電廠(chǎng)第j個(gè)可控負(fù)荷額定出力。
29、進(jìn)一步的，所述采用q值法求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型的過(guò)程中，兩個(gè)虛擬電廠(chǎng)聯(lián)盟集合合并后滿(mǎn)足約束包括：
30、
31、
32、上式中，為虛擬電廠(chǎng)聯(lián)盟集合完成需求響應(yīng)與日前調(diào)峰所分得收益，為虛擬電廠(chǎng)聯(lián)盟集合完成需求響應(yīng)與日前調(diào)峰所分得收益，為虛擬電廠(chǎng)聯(lián)盟集合與虛擬電廠(chǎng)聯(lián)盟集合合并后的虛擬電廠(chǎng)聯(lián)盟完成需求響應(yīng)與日前調(diào)峰所分得收益，為虛擬電廠(chǎng)聯(lián)盟集合與虛擬電廠(chǎng)聯(lián)盟集合合并后的虛擬電廠(chǎng)聯(lián)盟中第i個(gè)虛擬電廠(chǎng)的夏利普值，為虛擬電廠(chǎng)聯(lián)盟集合中第i個(gè)虛擬電廠(chǎng)的夏利普值，為虛擬電廠(chǎng)聯(lián)盟集合中第i個(gè)虛擬電廠(chǎng)的夏利普值，為虛擬電廠(chǎng)聯(lián)盟集合與虛擬電廠(chǎng)聯(lián)盟集合合并后的虛擬電廠(chǎng)聯(lián)盟中第j個(gè)虛擬電廠(chǎng)的夏利普值，為虛擬電廠(chǎng)聯(lián)盟集合中第j個(gè)虛擬電廠(chǎng)的夏利普值，為虛擬電廠(chǎng)聯(lián)盟集合中第j個(gè)虛擬電廠(chǎng)的夏利普值。
33、進(jìn)一步的，所述預(yù)先構(gòu)建的虛擬電廠(chǎng)聚合商優(yōu)化模型包括：以虛擬電廠(chǎng)聚合商自身收益最大為目標(biāo)的第二目標(biāo)函數(shù)及其對(duì)應(yīng)的第二約束條件。
34、進(jìn)一步的，所述第二目標(biāo)函數(shù)如下：
35、
36、上式中，為結(jié)算日虛擬電廠(chǎng)聚合商收益，為結(jié)算日虛擬電廠(chǎng)聚合商從事電能量交易取得的收益，為結(jié)算時(shí)段虛擬電廠(chǎng)聚合商組織參與需求響應(yīng)的收益，為結(jié)算時(shí)段虛擬電廠(chǎng)聚合商組織參與日前調(diào)峰的收益。
37、進(jìn)一步的，所述算日虛擬電廠(chǎng)聚合商從事電能量交易取得的收益如下：
38、
39、上式中，、、分別為虛擬電廠(chǎng)聚合商向虛擬電廠(chǎng)收取的購(gòu)電費(fèi)用，售電費(fèi)用和服務(wù)費(fèi)，、分別為虛擬電廠(chǎng)聚合商向電力現(xiàn)貨市場(chǎng)繳納的購(gòu)電費(fèi)用和市場(chǎng)運(yùn)營(yíng)分?jǐn)傎M(fèi)用。
40、進(jìn)一步的，所述虛擬電廠(chǎng)聚合商向虛擬電廠(chǎng)收取的購(gòu)電費(fèi)用，售電費(fèi)用和服務(wù)費(fèi)如下：
41、
42、
43、
44、其中：
45、，
46、
47、上式中，為第i個(gè)虛擬電廠(chǎng)t時(shí)刻的購(gòu)售電計(jì)劃值，，為虛擬電廠(chǎng)聚合商繳納的偏差電費(fèi)加權(quán)值的加權(quán)系數(shù)，為虛擬電廠(chǎng)聚合商實(shí)時(shí)偏差結(jié)算費(fèi)用。
48、進(jìn)一步的，所述虛擬電廠(chǎng)聚合商向電力現(xiàn)貨市場(chǎng)繳納的購(gòu)電費(fèi)用和市場(chǎng)運(yùn)營(yíng)分?jǐn)傎M(fèi)用如下：
49、
50、
51、上式中，為虛擬電廠(chǎng)聚合商日前申報(bào)計(jì)劃校核值，為日前市場(chǎng)統(tǒng)一結(jié)算電價(jià)，為虛擬電廠(chǎng)聚合商的市場(chǎng)運(yùn)營(yíng)成本分?jǐn)傁禂?shù)，其中：
52、
53、
54、上式中，為實(shí)時(shí)市場(chǎng)出清價(jià)格。
55、進(jìn)一步的，所述結(jié)算時(shí)段虛擬電廠(chǎng)聚合商組織參與需求響應(yīng)的收益如下：
56、
57、其中：
58、
59、
60、上式中，為需求響應(yīng)提成比例，、分別為虛擬電廠(chǎng)聚合商組織所轄虛擬電廠(chǎng)參與削峰和填谷響應(yīng)獲得收益，為時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的補(bǔ)貼系數(shù)，為時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的中標(biāo)狀態(tài)，表示時(shí)刻虛擬電廠(chǎng)聚合商有參與削峰響應(yīng)的指令，表示時(shí)刻虛擬電廠(chǎng)聚合商沒(méi)有參與削峰響應(yīng)的指令，為時(shí)刻虛擬電廠(chǎng)聚合商下調(diào)出力的計(jì)劃值，為時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的完成情況，表示時(shí)刻虛擬電廠(chǎng)聚合商下調(diào)出力，表示時(shí)刻虛擬電廠(chǎng)聚合商沒(méi)有下調(diào)出力，為虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的補(bǔ)貼單價(jià)，、虛擬電廠(chǎng)聚合商參與削峰響應(yīng)中標(biāo)的起始時(shí)刻和結(jié)束時(shí)刻，為時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的補(bǔ)貼系數(shù)，為時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的中標(biāo)狀態(tài)，表示時(shí)刻虛擬電廠(chǎng)聚合商有參與填谷響應(yīng)的指令，表示時(shí)刻虛擬電廠(chǎng)聚合商沒(méi)有參與填谷響應(yīng)的指令，為時(shí)刻虛擬電廠(chǎng)聚合商上調(diào)出力的計(jì)劃值，為時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的完成情況，表示時(shí)刻虛擬電廠(chǎng)聚合商下調(diào)出力，表示時(shí)刻虛擬電廠(chǎng)聚合商沒(méi)有下調(diào)出力，為虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的補(bǔ)貼單價(jià)。、虛擬電廠(chǎng)聚合商參與填谷響應(yīng)中標(biāo)的起始時(shí)刻和結(jié)束時(shí)刻。
61、進(jìn)一步的，所述時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的完成情況如下：
62、
63、所述時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的補(bǔ)貼系數(shù)如下：
64、
65、所述時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的完成情況如下：
66、
67、所述時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的補(bǔ)貼系數(shù)如下：
68、
69、上式中，為時(shí)刻虛擬電廠(chǎng)聚合商基準(zhǔn)負(fù)荷值，為時(shí)刻虛擬電廠(chǎng)聚合商基準(zhǔn)負(fù)荷值。
70、進(jìn)一步的，所述結(jié)算時(shí)段虛擬電廠(chǎng)聚合商組織參與日前調(diào)峰的收益如下：
71、
72、其中：
73、
74、
75、
76、
77、上式中，為虛擬電廠(chǎng)聚合商組織參與正調(diào)峰市場(chǎng)收益，為虛擬電廠(chǎng)聚合商組織參與負(fù)調(diào)峰市場(chǎng)收益，為日前調(diào)峰抽成比例，為虛擬電廠(chǎng)聚合商參與正調(diào)峰的中標(biāo)狀態(tài)，表示虛擬電廠(chǎng)聚合商有收到參與正調(diào)峰的消息，表示虛擬電廠(chǎng)聚合商沒(méi)有收到參與正調(diào)峰的消息，為調(diào)峰時(shí)段虛擬電廠(chǎng)正調(diào)峰的完成情況，表示虛擬電廠(chǎng)聚合商在調(diào)峰時(shí)段內(nèi)用電量增加且沒(méi)有超過(guò)聚合商基準(zhǔn)負(fù)荷最大值，為調(diào)峰時(shí)段起始和結(jié)束時(shí)刻，表示虛擬電廠(chǎng)聚合商在調(diào)峰時(shí)段正調(diào)峰不成功，為虛擬電廠(chǎng)聚合商參與正調(diào)峰的補(bǔ)貼單價(jià)，為時(shí)刻虛擬電廠(chǎng)聚合商基準(zhǔn)負(fù)荷值，為虛擬電廠(chǎng)聚合商參與負(fù)調(diào)峰的中標(biāo)狀態(tài)，表示虛擬電廠(chǎng)聚合商有收到參與負(fù)調(diào)峰的消息，表示虛擬電廠(chǎng)聚合商沒(méi)有收到參與負(fù)調(diào)峰的消息，為調(diào)峰時(shí)段虛擬電廠(chǎng)負(fù)調(diào)峰的完成情況，表示虛擬電廠(chǎng)聚合商在調(diào)峰時(shí)段內(nèi)用電量減少，表示虛擬電廠(chǎng)聚合商在調(diào)峰時(shí)段負(fù)調(diào)峰不成功，為虛擬電廠(chǎng)聚合商參與負(fù)調(diào)峰的補(bǔ)貼單價(jià)，為判斷負(fù)調(diào)峰成立的閾值，為判斷正調(diào)峰成立的閾值。
78、進(jìn)一步的，所述第二約束條件如下：
79、
80、
81、
82、
83、
84、
85、，
86、
87、，
88、
89、上式中，為參與削峰需求響應(yīng)的對(duì)象連續(xù)響應(yīng)時(shí)長(zhǎng)，為參與填谷需求響應(yīng)的對(duì)象連續(xù)響應(yīng)時(shí)長(zhǎng)，為參與削峰需求響應(yīng)的對(duì)象最小連續(xù)響應(yīng)時(shí)長(zhǎng)，為時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的完成情況，為時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的完成情況，為參與填谷需求響應(yīng)的對(duì)象最小連續(xù)響應(yīng)時(shí)長(zhǎng)，為時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的完成情況，為時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的完成情況，為虛擬電廠(chǎng)聚合商單日參與需求響應(yīng)的次數(shù)，為規(guī)定的每日參與需求響應(yīng)次數(shù)上限，、分別為需求響應(yīng)中對(duì)日前削峰響應(yīng)、填谷響應(yīng)的補(bǔ)貼單價(jià)上限，、分別為正調(diào)峰、負(fù)調(diào)峰的補(bǔ)貼單價(jià)上限，為需求響應(yīng)中對(duì)日前填谷響應(yīng)的補(bǔ)貼單價(jià)，為需求響應(yīng)中對(duì)日前削峰響應(yīng)的補(bǔ)貼單價(jià)，為時(shí)刻虛擬電廠(chǎng)聚合商參與削峰響應(yīng)的完成情況，為時(shí)刻虛擬電廠(chǎng)聚合商參與填谷響應(yīng)的完成情況。
90、第二方面，提供一種基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制裝置，所述基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制裝置包括：
91、第一分析模塊，用于基于各虛擬電廠(chǎng)的夏利普值求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型，并在各虛擬電廠(chǎng)中確定虛擬電廠(chǎng)聯(lián)盟；
92、第二分析模塊，用于利用多智能體強(qiáng)化學(xué)習(xí)法求解所述虛擬電廠(chǎng)聯(lián)盟對(duì)應(yīng)的預(yù)先構(gòu)建的虛擬電廠(chǎng)聚合商優(yōu)化模型，得到虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)參與需求響應(yīng)和日前調(diào)峰的動(dòng)作策略；
93、第三分析模塊，用于利用所述虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)參與需求響應(yīng)和日前調(diào)峰的動(dòng)作策略對(duì)虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)進(jìn)行協(xié)同優(yōu)化控制；
94、其中，所述動(dòng)作策略包括：出力計(jì)劃和電價(jià)，所述多智能體強(qiáng)化學(xué)習(xí)法的執(zhí)行過(guò)程中，狀態(tài)空間包括各虛擬電廠(chǎng)的觀察信息。
95、第三方面，提供一種計(jì)算機(jī)設(shè)備，包括：一個(gè)或多個(gè)處理器；
96、所述處理器，用于執(zhí)行一個(gè)或多個(gè)程序；
97、當(dāng)所述一個(gè)或多個(gè)程序被所述一個(gè)或多個(gè)處理器執(zhí)行時(shí)，實(shí)現(xiàn)所述的基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法。
98、第四方面，提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被執(zhí)行時(shí)，實(shí)現(xiàn)所述的基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法。
99、本發(fā)明上述一個(gè)或多個(gè)技術(shù)方案，至少具有如下一種或多種有益效果：
100、本發(fā)明提供了一種基于多智能體博弈強(qiáng)化學(xué)習(xí)的虛擬電廠(chǎng)協(xié)同優(yōu)化控制方法及裝置，包括：基于各虛擬電廠(chǎng)的夏利普值求解預(yù)先構(gòu)建的虛擬電廠(chǎng)優(yōu)化模型，并在各虛擬電廠(chǎng)中確定虛擬電廠(chǎng)聯(lián)盟；利用多智能體強(qiáng)化學(xué)習(xí)法求解所述虛擬電廠(chǎng)聯(lián)盟對(duì)應(yīng)的預(yù)先構(gòu)建的虛擬電廠(chǎng)聚合商優(yōu)化模型，得到虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)參與需求響應(yīng)和日前調(diào)峰的動(dòng)作策略；利用所述虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)參與需求響應(yīng)和日前調(diào)峰的動(dòng)作策略對(duì)虛擬電廠(chǎng)聯(lián)盟中各虛擬電廠(chǎng)進(jìn)行協(xié)同優(yōu)化控制；其中，所述動(dòng)作策略包括：出力計(jì)劃和電價(jià)，所述多智能體強(qiáng)化學(xué)習(xí)法的執(zhí)行過(guò)程中，狀態(tài)空間包括各虛擬電廠(chǎng)的觀察信息。本發(fā)明提供的技術(shù)方案，一方面激發(fā)虛擬電廠(chǎng)聚合商有動(dòng)力提供優(yōu)質(zhì)服務(wù)助力虛擬電廠(chǎng)順利入市，另一方面提升虛擬電廠(chǎng)積極性參與系統(tǒng)調(diào)節(jié)，拓展其盈利空間，同時(shí)該商業(yè)模式也以較低的成本發(fā)掘負(fù)荷側(cè)可觀的可調(diào)節(jié)能力，為電力系統(tǒng)安全穩(wěn)定經(jīng)濟(jì)運(yùn)行提供保障，實(shí)現(xiàn)多方共贏。