技術(shù)特征：

1.一種基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述數(shù)據(jù)中心自適應(yīng)流量控制方法具體包括以下步驟：

2.根據(jù)權(quán)利要求1所述的基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述步驟1中，選取觸發(fā)流量控制時(shí)發(fā)送暫停幀的閾值作為動(dòng)作空間，選取交換機(jī)收發(fā)數(shù)據(jù)流量、上游交換機(jī)端口暫停時(shí)間作為狀態(tài)空間參數(shù)具體包括如下步驟：

3.根據(jù)權(quán)利要求1所述的基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述步驟2中根據(jù)動(dòng)作空間與狀態(tài)空間，確定動(dòng)作執(zhí)行前后網(wǎng)絡(luò)環(huán)境的變化，設(shè)計(jì)獎(jiǎng)勵(lì)函數(shù)，具體包括如下步驟：

4.根據(jù)權(quán)利要求1所述的基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述步驟3中設(shè)計(jì)并部署在交換機(jī)上通過執(zhí)行動(dòng)作來獲取狀態(tài)并計(jì)算獎(jiǎng)勵(lì)加以學(xué)習(xí)，幫助做出最佳決策的智能體來統(tǒng)一管理交換機(jī)端口隊(duì)列，具體包括如下步驟：

5.根據(jù)權(quán)利要求1所述的基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述步驟4中，智能體與交換機(jī)交互，計(jì)算獎(jiǎng)勵(lì)，更新網(wǎng)絡(luò)，訓(xùn)練優(yōu)化網(wǎng)絡(luò)環(huán)境具體包括如下步驟：

6.根據(jù)權(quán)利要求1所述的基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述步驟5中，若訓(xùn)練的交換機(jī)端口閾值在多個(gè)時(shí)間步內(nèi)均沒有產(chǎn)生獎(jiǎng)勵(lì)，說明此閾值與當(dāng)前網(wǎng)絡(luò)環(huán)境適配，暫停訓(xùn)練以降低交換機(jī)性能開銷，具體包括如下步驟：

7.根據(jù)權(quán)利要求1所述的基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，其特征在于：所述步驟6具體包括如下步驟：

技術(shù)總結(jié)
本發(fā)明屬于數(shù)據(jù)中心網(wǎng)絡(luò)流量控制領(lǐng)域，公開了一種基于深度強(qiáng)化學(xué)習(xí)的數(shù)據(jù)中心自適應(yīng)流量控制方法，包括：S1，選取動(dòng)作空間和狀態(tài)空間參數(shù)；S2，根據(jù)動(dòng)作空間與狀態(tài)空間，設(shè)計(jì)獎(jiǎng)勵(lì)函數(shù)；S3，統(tǒng)一管理交換機(jī)端口隊(duì)列；S4,獲取狀態(tài)，計(jì)算獎(jiǎng)勵(lì)，并更新網(wǎng)絡(luò)，訓(xùn)練優(yōu)化網(wǎng)絡(luò)環(huán)境；S5，若交換機(jī)端口閾值在多個(gè)時(shí)間步內(nèi)均沒有產(chǎn)生獎(jiǎng)勵(lì)，說明此閾值與當(dāng)前網(wǎng)絡(luò)環(huán)境適配，暫停訓(xùn)練，S6，當(dāng)暫停訓(xùn)練的交換機(jī)端口數(shù)據(jù)累計(jì)超過界限時(shí)，表征此時(shí)可能觸發(fā)流量控制，恢復(fù)對(duì)此端口閾值的訓(xùn)練。本發(fā)明使交換機(jī)的每個(gè)端口實(shí)現(xiàn)了自適應(yīng)流量調(diào)控，可有效提升網(wǎng)絡(luò)傳輸速度，具備收斂快、易部署、適配性強(qiáng)等優(yōu)點(diǎn)。

技術(shù)研發(fā)人員：王圣凱,何昕,丁樂平,王文彬,王茂林,樊衛(wèi)北,王俊昌
受保護(hù)的技術(shù)使用者：南京郵電大學(xué)
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/26