欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

一種深度網(wǎng)路分析系統(tǒng)的測試方法和裝置與流程

文檔序號:11959642閱讀:182來源:國知局
一種深度網(wǎng)路分析系統(tǒng)的測試方法和裝置與流程

本發(fā)明涉及通信網(wǎng)絡測試技術,尤指一種深度網(wǎng)絡分析系統(tǒng)的測試方法和裝置。



背景技術:

隨著運營商業(yè)務的迅速發(fā)展,對網(wǎng)絡流量的監(jiān)測和管理分析提出了如下目標:

1、支撐運營商集團統(tǒng)一規(guī)范化管理分組傳送網(wǎng)(Packet Transport Network,PTN)網(wǎng)絡流量監(jiān)測和管理分析工作,匯總分析各省市公司的PTN網(wǎng)絡流量使用狀態(tài),把握業(yè)務流量和網(wǎng)絡資源使用的整體發(fā)展趨勢;

2、有利于各省和地市公司規(guī)范化開展PTN網(wǎng)絡流量監(jiān)測和管理分析的相關工作,提升PTN網(wǎng)絡運維管理能力,具體包括:

(a)對PTN網(wǎng)絡流量實施長期監(jiān)測和統(tǒng)計分析,為PTN網(wǎng)絡容量預警管理、各類業(yè)務QoS帶寬參數(shù)優(yōu)化配置以及業(yè)務網(wǎng)流量經(jīng)營分析提供所需的流量分析數(shù)據(jù)和指標;

(b)開展PTN網(wǎng)絡預警管理工作,對PTN網(wǎng)絡中處于高負載水平的端口和系統(tǒng)進行重點流量監(jiān)測和統(tǒng)計分析,指導PTN網(wǎng)絡實現(xiàn)流量均衡優(yōu)化,避免出現(xiàn)網(wǎng)絡擁塞;指導PTN網(wǎng)絡進行資源預警和擴容,滿足新增業(yè)務需求。

(c)優(yōu)化PTN承載各類業(yè)務的服務質(zhì)量(Quality of Service,QoS)帶寬參數(shù)配置,通過PTN網(wǎng)絡流量監(jiān)測分析獲得忙時均值流速和峰值流速,結合業(yè)務網(wǎng)發(fā)展需求,對各類業(yè)務的QoS帶寬參數(shù)(如保證帶寬和峰值帶寬)進行優(yōu)化調(diào)整,提高PTN網(wǎng)絡帶寬的實際使用效率。

(d)提供業(yè)務流量的歷史數(shù)據(jù)統(tǒng)計分析和發(fā)展趨勢預測,及時開展第三代移動通信技術(3rd-Generation,3G)和長期演進(Long Term Evolution,LTE)移動基站回傳、集團客戶專線等業(yè)務端口帶寬的擴容工作,支撐業(yè)務網(wǎng)的流量經(jīng)營策略,提升客戶服務質(zhì)量。

深度網(wǎng)絡分析(Deep Network Analyzer,DNA)系統(tǒng)就是一種為了實現(xiàn)上述目標而開發(fā)的分析系統(tǒng)。為了提高DNA系統(tǒng)分析結果的準確度以及分析效率等指標,一般需要對DNA系統(tǒng)進行測試調(diào)整,現(xiàn)有的方案中,在對DNA系統(tǒng)進行測試時,需要使用通信網(wǎng)絡組網(wǎng)環(huán)境中大量真實的性能數(shù)據(jù),由于真實數(shù)據(jù)一般不容易產(chǎn)生獲取,導致測試往往無法進行,并且對于系統(tǒng)監(jiān)測范圍內(nèi)的網(wǎng)絡優(yōu)化、升級擴容、預警等情況,測試時很難在真實的網(wǎng)絡組網(wǎng)環(huán)境中實現(xiàn)相同的業(yè)務變更,因此,現(xiàn)有的技術方案存在測試環(huán)境受限以及測試效率低下的問題。



技術實現(xiàn)要素:

為了解決上述技術問題,本發(fā)明實施例提供了一種深度網(wǎng)絡分析系統(tǒng)的測試方法和裝置,可以不受測試環(huán)境的限制并能夠提高測試效率。

為了達到本發(fā)明目的,本發(fā)明實施例提供了一種深度網(wǎng)絡分析系統(tǒng)的測試方法,所述方法包括:

根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;

根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);

利用所述模擬性能數(shù)據(jù)測試所述深度網(wǎng)絡分析DNA系統(tǒng)、獲取所述DNA系統(tǒng)對所述模擬性能數(shù)據(jù)分析處理后得到的數(shù)據(jù);

當根據(jù)所述對比數(shù)據(jù)驗證所述分析處理后得到的數(shù)據(jù)為正確數(shù)據(jù)時,確定所述DNA系統(tǒng)能夠正確分析網(wǎng)絡。

進一步的,所述方法還包括:

當所述分析處理后得到的數(shù)據(jù)超過所述DNA系統(tǒng)中預設的告警閾值,觸發(fā)所述DNA系統(tǒng)告警時,判斷是否測試所述DNA系統(tǒng)解除告警的功能;

當測試所述DNA系統(tǒng)解除告警的功能時,判斷是否修改所述模擬性能數(shù)據(jù);

當修改所述模擬性能數(shù)據(jù)時,檢索性能數(shù)據(jù)模板庫,若所述性能數(shù)據(jù)模板庫中存在需要的性能數(shù)據(jù)模板,則調(diào)用所述性能數(shù)據(jù)模板修改所述模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試所述DNA系統(tǒng)是否解除告警;若所述性能數(shù)據(jù)模板庫不存在需要的性能數(shù)據(jù)模板,則新增所述性能數(shù)據(jù)模板并將所述性能數(shù)據(jù)模板更新到所述性能數(shù)據(jù)模板庫中,采用所述新增的性能數(shù)據(jù)模板修改所述模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試所述DNA系統(tǒng)是否解除告警;

當不修改所述模擬性能數(shù)據(jù)時,修改所述告警閾值,根據(jù)修改后的告警閾值測試所述DNA系統(tǒng)是否解除告警。

進一步的,所述方法還包括:

當未觸發(fā)所述DNA系統(tǒng)告警或者不測試解除告警的功能時,判斷是否測試所述DNA系統(tǒng)均衡流量的功能;

當測試所述DNA系統(tǒng)均衡流量的功能時,對所述網(wǎng)絡拓撲中的業(yè)務路徑進行調(diào)整并根據(jù)所述調(diào)整更新所述資產(chǎn)文件,執(zhí)行所述根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

進一步的,所述方法還包括:

當不測試所述DNA系統(tǒng)均衡流量的功能時,判斷是否測試所述DNA系統(tǒng)調(diào)整服務質(zhì)量QoS參數(shù)的功能;

當測試所述DNA系統(tǒng)調(diào)整QoS參數(shù)的功能時,檢索QoS參數(shù)模板庫;

若所述QoS參數(shù)模板庫中存在需要的QoS參數(shù)模板,則調(diào)用所述QoS參數(shù)模板并修改所述業(yè)務參數(shù),根據(jù)所述修改后的業(yè)務參數(shù)更新所述資產(chǎn)文件,執(zhí)行所述根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);

若所述QoS參數(shù)模板庫中不存在需要的QoS參數(shù)模板,則新增所述QoS參數(shù)模板并將所述QoS參數(shù)模板更新到所述QoS參數(shù)模板庫中,調(diào)用新增的QoS參數(shù)模板并修改所述業(yè)務參數(shù),根據(jù)所述修改后的業(yè)務參數(shù)更新所述資 產(chǎn)文件,執(zhí)行所述根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

進一步的,所述方法還包括:

當不測試所述DNA系統(tǒng)調(diào)整QoS參數(shù)的功能時,判斷是否測試所述DNA系統(tǒng)網(wǎng)絡擴容的功能;

當測試所述DNA系統(tǒng)網(wǎng)絡擴容的功能時,檢索所述資產(chǎn)庫;

若所述資產(chǎn)庫中存在需要的資產(chǎn),則調(diào)用所述資產(chǎn)更新所述網(wǎng)絡拓撲,執(zhí)行所述根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;

若所述資產(chǎn)庫中不存在需要的資產(chǎn),則新增所述資產(chǎn)并將所述資產(chǎn)更新到所述資產(chǎn)庫中,調(diào)用新增的資產(chǎn)更新所述網(wǎng)絡拓撲,執(zhí)行所述根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件。

本發(fā)明實施例還提供一種用于測試深度網(wǎng)絡分析系統(tǒng)的裝置,所述裝置包括:

配置模塊,用于根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;

生成數(shù)據(jù)模塊,用于根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);

測試模塊,用于利用所述模擬性能數(shù)據(jù)測試所述深度網(wǎng)絡分析DNA系統(tǒng)、獲取所述DNA系統(tǒng)對所述模擬性能數(shù)據(jù)分析處理后得到的數(shù)據(jù);

驗證模塊,用于當根據(jù)所述對比數(shù)據(jù)驗證所述分析處理后得到的數(shù)據(jù)為正確數(shù)據(jù)時,確定所述DNA系統(tǒng)能夠正確分析網(wǎng)絡。

進一步的,所述測試模塊還用于:

當所述分析處理后得到的數(shù)據(jù)超過所述DNA系統(tǒng)中預設的告警閾值,觸發(fā)所述DNA系統(tǒng)告警時,判斷是否測試所述DNA系統(tǒng)解除告警的功能;

當測試所述DNA系統(tǒng)解除告警的功能時,判斷是否修改所述模擬性能數(shù)據(jù);

當修改所述模擬性能數(shù)據(jù)時,檢索性能數(shù)據(jù)模板庫,若所述性能數(shù)據(jù)模板庫中存在需要的性能數(shù)據(jù)模板,則調(diào)用所述性能數(shù)據(jù)模板修改所述模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試所述DNA系統(tǒng)是否解除告警;若所 述性能數(shù)據(jù)模板庫不存在需要的性能數(shù)據(jù)模板,則新增所述性能數(shù)據(jù)模板并將所述性能數(shù)據(jù)模板更新到所述性能數(shù)據(jù)模板庫中,采用所述新增的性能數(shù)據(jù)模板修改所述模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試所述DNA系統(tǒng)是否解除告警;

當不修改所述模擬性能數(shù)據(jù)時,修改所述告警閾值,根據(jù)修改后的告警閾值測試所述DNA系統(tǒng)是否解除告警。

進一步的,所述測試模塊還用于:

當未觸發(fā)所述DNA系統(tǒng)告警或者不測試解除告警的功能時,判斷是否測試所述DNA系統(tǒng)均衡流量的功能;

當測試所述DNA系統(tǒng)均衡流量的功能時,對所述網(wǎng)絡拓撲中的業(yè)務路徑進行調(diào)整并根據(jù)所述調(diào)整更新所述資產(chǎn)文件,執(zhí)行所述根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

進一步的,所述測試模塊還用于:

當不測試所述DNA系統(tǒng)均衡流量的功能時,判斷是否測試所述DNA系統(tǒng)調(diào)整服務質(zhì)量QoS參數(shù)的功能;

當測試所述DNA系統(tǒng)調(diào)整QoS參數(shù)的功能時,檢索QoS參數(shù)模板庫;

若所述QoS參數(shù)模板庫中存在需要的QoS參數(shù)模板,則調(diào)用所述QoS參數(shù)模板并修改所述業(yè)務參數(shù),根據(jù)所述修改后的業(yè)務參數(shù)更新所述資產(chǎn)文件,執(zhí)行所述根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);

若所述QoS參數(shù)模板庫中不存在需要的QoS參數(shù)模板,則新增所述QoS參數(shù)模板并將所述QoS參數(shù)模板更新到所述QoS參數(shù)模板庫中,調(diào)用新增的QoS參數(shù)模板并修改所述業(yè)務參數(shù),根據(jù)所述修改后的業(yè)務參數(shù)更新所述資產(chǎn)文件,執(zhí)行所述根據(jù)所述資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

進一步的,所述測試模塊還用于:

當不測試所述DNA系統(tǒng)調(diào)整QoS參數(shù)的功能時,判斷是否測試所述DNA系統(tǒng)網(wǎng)絡擴容的功能;

當測試所述DNA系統(tǒng)網(wǎng)絡擴容的功能時,檢索資產(chǎn)庫;

若所述資產(chǎn)庫中存在需要的資產(chǎn),則調(diào)用所述資產(chǎn)更新所述網(wǎng)絡拓撲,執(zhí)行所述根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;

若所述資產(chǎn)庫中不存在需要的資產(chǎn),則新增所述資產(chǎn)并將所述資產(chǎn)更新到所述資產(chǎn)庫中,調(diào)用新增的資產(chǎn)更新所述網(wǎng)絡拓撲,執(zhí)行所述根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件。

相對于現(xiàn)有技術中無法獲取真實的網(wǎng)絡拓撲中的性能數(shù)據(jù)而無法對DNA系統(tǒng)進行測試,本發(fā)明實施例提供的一種深度網(wǎng)絡分析系統(tǒng)的測試方法和裝置,按照測試要求模擬規(guī)劃網(wǎng)絡拓撲以及業(yè)務參數(shù)生成資產(chǎn)文件,再根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)及對比數(shù)據(jù),將模擬性能數(shù)據(jù)輸入DNA系統(tǒng)完成DNA系統(tǒng)的測試,并根據(jù)對比數(shù)據(jù)驗證DNA系統(tǒng)分析處理后得到的數(shù)據(jù)是否正確。通過本發(fā)明實施例的方案,測試DNA系統(tǒng)時可以不受測試環(huán)境的限制并能夠提高測試效率。

本發(fā)明的其它特征和優(yōu)點將在隨后的說明書中闡述,并且,部分地從說明書中變得顯而易見,或者通過實施本發(fā)明而了解。本發(fā)明的目的和其他優(yōu)點可通過在說明書、權利要求書以及附圖中所特別指出的結構來實現(xiàn)和獲得。

附圖說明

附圖用來提供對本發(fā)明技術方案的進一步理解,并且構成說明書的一部分,與本申請的實施例一起用于解釋本發(fā)明的技術方案,并不構成對本發(fā)明技術方案的限制。

圖1為本發(fā)明實施例提供的一種深度網(wǎng)絡分析系統(tǒng)的測試方法的流程示意圖;

圖2為本發(fā)明實施例提供的一種深度網(wǎng)絡分析系統(tǒng)的測試方法的實施示意圖;

圖3為本發(fā)明實施例提供的一種網(wǎng)絡拓撲的示意圖;

圖4為本發(fā)明實施例提供的另一種網(wǎng)絡拓撲的示意圖;

圖5為本發(fā)明實施例提供的一種網(wǎng)絡拓撲中的設備的連接示意圖;

圖6為本發(fā)明實施例提供的一種用于測試深度網(wǎng)絡分析系統(tǒng)的裝置的結構示意圖。

具體實施方式

為使本發(fā)明的目的、技術方案和優(yōu)點更加清楚明白,下文中將結合附圖對本發(fā)明的實施例進行詳細說明。需要說明的是,在不沖突的情況下,本申請中的實施例及實施例中的特征可以相互任意組合。

在附圖的流程圖示出的步驟可以在諸如一組計算機可執(zhí)行指令的計算機系統(tǒng)中執(zhí)行。并且,雖然在流程圖中示出了邏輯順序,但是在某些情況下,可以以不同于此處的順序執(zhí)行所示出或描述的步驟。

本發(fā)明實施例提供一種深度網(wǎng)絡分析系統(tǒng)的測試方法,如圖1所示,該方法包括:

步驟101、根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件。

示例性的,根據(jù)系統(tǒng)測試或集采測試業(yè)務場景環(huán)境配置網(wǎng)絡拓撲和業(yè)務參數(shù),并根據(jù)網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件,其中,網(wǎng)絡拓撲為通信網(wǎng)絡中包括的各種設備以及各種設備之間的連接關系,業(yè)務參數(shù)包括:通信網(wǎng)絡承載的各種業(yè)務的參數(shù)例如流量參數(shù)、QoS參數(shù)等,資產(chǎn)文件中包括以下至少一種類型的資產(chǎn)或其任意組合:端口、鏈路、網(wǎng)元、單板、偽線、隧道、業(yè)務、環(huán)網(wǎng)。本步驟涉及的相關內(nèi)容均屬于現(xiàn)有技術,在此不做詳細說明。

步驟102、根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

示例性的,根據(jù)步驟101生成的資產(chǎn)文件以及預先編寫的測試計劃(測試計劃中可以包括:測試時間段、測試場景、匯聚周期等)和測試用例,使用預先定義的性能模擬工具生成模擬性能數(shù)據(jù),生成規(guī)劃的網(wǎng)絡拓撲的模擬性能數(shù)據(jù)以及對比數(shù)據(jù),模擬性能數(shù)據(jù)作為原始數(shù)據(jù)發(fā)送到DNA系統(tǒng)進行分析計算;對比數(shù)據(jù)庫數(shù)據(jù)是按照測試要求生成的結果數(shù)據(jù),作為DNA系統(tǒng)最終分析結果的參照標準。

步驟103、利用模擬性能數(shù)據(jù)測試DNA系統(tǒng)、獲取DNA系統(tǒng)對模擬性 能數(shù)據(jù)分析處理后得到的數(shù)據(jù)。

示例性的,將步驟102生成的模擬性能數(shù)據(jù)作為DNA系統(tǒng)的輸入、獲取DNA系統(tǒng)對模擬性能數(shù)據(jù)分析處理后得到的數(shù)據(jù)。

需要說明的是,DNA系統(tǒng)分析處理數(shù)據(jù)的過程屬于現(xiàn)有的技術手段,在此對DNA系統(tǒng)分析處理數(shù)據(jù)的過程簡單舉例說明如下:數(shù)據(jù)采集模塊按照預設時間例如15分鐘粒度采集模擬性能數(shù)據(jù),初步處理后上報給計算模塊;計算模塊根據(jù)指標定義計算出所有數(shù)據(jù),按照時、日、月、年的粒度匯總入庫;系統(tǒng)的顯示模塊按照自定義條件篩選查詢數(shù)據(jù),并顯示在表格中,告警模塊根據(jù)告警閾值顯示告警內(nèi)容;拓撲模塊展示網(wǎng)絡拓撲和變化情況,資產(chǎn)管理模塊顯示資產(chǎn)詳細信息。

步驟104、當根據(jù)對比數(shù)據(jù)驗證分析處理后得到的數(shù)據(jù)為正確數(shù)據(jù)時,確定DNA系統(tǒng)能夠正確分析網(wǎng)絡。

示例性的,根據(jù)步驟102生成的對比數(shù)據(jù)驗證該DNA系統(tǒng)分析處理后得到的數(shù)據(jù)是否正確,當通過驗證確認數(shù)據(jù)正確時,確定該DNA系統(tǒng)能夠正確分析網(wǎng)絡。

需要說明的是,當根據(jù)對比數(shù)據(jù)驗證分析處理后得到的數(shù)據(jù)為錯誤數(shù)據(jù)時,確定DNA系統(tǒng)不能夠正確分析網(wǎng)絡,收集故障信息,進一步對DNA系統(tǒng)進行調(diào)試。

相對于現(xiàn)有技術中無法獲取真實的網(wǎng)絡拓撲中的性能數(shù)據(jù)而無法對DNA系統(tǒng)進行測試,本發(fā)明實施例提供的上述方案中,按照測試要求模擬規(guī)劃網(wǎng)絡拓撲以及業(yè)務參數(shù)生成資產(chǎn)文件,再根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)及對比數(shù)據(jù),將模擬性能數(shù)據(jù)輸入DNA系統(tǒng)完成DNA系統(tǒng)的測試,并根據(jù)對比數(shù)據(jù)驗證DNA系統(tǒng)分析處理后得到的數(shù)據(jù)是否正確,從而能夠實現(xiàn)不依賴獲取真實通信網(wǎng)絡中性能數(shù)據(jù)就能對DNA系統(tǒng)進行測試。

進一步的,如圖2所示,該方法還可以包括:

當分析處理后得到的數(shù)據(jù)超過DNA系統(tǒng)中預設的告警閾值、觸發(fā)DNA系統(tǒng)告警時,判斷是否測試DNA系統(tǒng)解除告警的功能;

當測試DNA系統(tǒng)解除告警的功能時,判斷是否修改模擬性能數(shù)據(jù);

當修改模擬性能數(shù)據(jù)時,檢索性能數(shù)據(jù)模板庫,若性能數(shù)據(jù)模板庫中存在需要的性能數(shù)據(jù)模板,則調(diào)用性能數(shù)據(jù)模板修改模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試DNA系統(tǒng)是否解除告警;若性能數(shù)據(jù)模板庫不存在需要的性能數(shù)據(jù)模板,則新增性能數(shù)據(jù)模板并將性能數(shù)據(jù)模板更新到性能數(shù)據(jù)模板庫中,采用新增的性能數(shù)據(jù)模板修改模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試DNA系統(tǒng)是否解除告警;

當不修改模擬性能數(shù)據(jù)時,修改告警閾值,根據(jù)修改后的告警閾值測試DNA系統(tǒng)是否解除告警。

示例性的,當DNA系統(tǒng)對高負載的端口、鏈路、網(wǎng)元等上報告警后,根據(jù)實際測試需求判斷是否需要測試模擬性能數(shù)據(jù)或告警閾值改變后該DNA系統(tǒng)分析處理后的數(shù)據(jù)以及告警信息是否會有相應的變化。如果不修改模擬性能數(shù)據(jù),則修改告警閾值并將告警閾值修改信息反饋至DNA系統(tǒng),重新設置,在下一數(shù)據(jù)采集點查看數(shù)據(jù)顏色和告警是否正確;如果修改模擬性能數(shù)據(jù),則結合閾值條件檢索模擬性能數(shù)據(jù)模板庫,如果不存在相應模板,則新增模板后更新模擬性能數(shù)據(jù)模板庫;如果存在需要的模板,則獲取后反饋到步驟102中,生成符合閾值區(qū)間的性能文件后再次上報給DNA系統(tǒng)進行分析匯總,驗證分析處理后的數(shù)據(jù)和告警信息能否實時改變。值得一提的是,如果沒有觸發(fā)告警,想要測試DNA系統(tǒng)是否能正常告警時,可以將未超過閾值的模擬性能數(shù)據(jù)修改到超出閾值,以測試能否產(chǎn)生告警。

進一步的,如圖2所示,該方法還可以包括:

當未觸發(fā)DNA系統(tǒng)告警或者不測試解除告警的功能時,判斷是否測試DNA系統(tǒng)均衡流量的功能;

當測試DNA系統(tǒng)均衡流量的功能時,對網(wǎng)絡拓撲中的業(yè)務路徑進行調(diào)整并根據(jù)調(diào)整修改更新資產(chǎn)文件,執(zhí)行步驟102。

示例性的,在某些端口或鏈路處于高負載時,可能會切換業(yè)務流量到備路徑以實現(xiàn)均衡,在均衡流量的情況下,可能需要測試DNA系統(tǒng)獲取最新數(shù)據(jù)的能力。如果需要測試均衡流量,則改變業(yè)務路徑,更新資產(chǎn)庫中的數(shù)據(jù),將業(yè)務切換到備路徑上,對端口、鏈路、網(wǎng)元、偽線、隧道信息全部進 行相應修改,并將修改信息反饋到步驟102,生成新的性能數(shù)據(jù)后再次上報給DNA系統(tǒng)分析匯總,驗證網(wǎng)絡流量變化后的數(shù)據(jù)是否正確。另外,也可以再次測試從備路徑切換回主路徑的情況。

進一步的,如圖2所示,該方法還可以包括:

當不測試DNA系統(tǒng)均衡流量的功能時,判斷是否測試DNA系統(tǒng)調(diào)整服務質(zhì)量QoS參數(shù);

當測試DNA系統(tǒng)調(diào)整QoS參數(shù)時,檢索QoS參數(shù)模板庫;

若QoS參數(shù)模板庫中存在需要的QoS參數(shù)模板,則調(diào)用QoS參數(shù)模板并修改業(yè)務參數(shù),根據(jù)修改后的業(yè)務參數(shù)更新資產(chǎn)文件,執(zhí)行步驟102;

若QoS參數(shù)模板庫中不存在需要的QoS參數(shù)模板,則新增QoS參數(shù)模板并將QoS參數(shù)模板更新到QoS參數(shù)模板庫中,調(diào)用新增的QoS參數(shù)模板并修改業(yè)務參數(shù),根據(jù)修改后的業(yè)務參數(shù)更新資產(chǎn)文件,執(zhí)行步驟102。

示例性的,結合業(yè)務網(wǎng)發(fā)展需求,可能會修改保證信息率(Committed Information Rate,CIR)和峰值信息率(Peak Information Rate,PIR)等QoS參數(shù),因此需要測試修改QoS參數(shù)后,可能需要測試DNA系統(tǒng)處理數(shù)據(jù)的能力。如果修改QoS參數(shù),則查找預置QoS參數(shù)模板庫,如果不存在相應模板,則新增模板后更新QoS參數(shù)模板庫;如果存在需要的模板,則套用該模板并將QoS參數(shù)修改信息反饋到步驟102,然后再次生成模擬性能數(shù)據(jù)后上報給DNA系統(tǒng)分析匯總,并驗證QoS參數(shù)變化后DNA系統(tǒng)分析處理的數(shù)據(jù)是否正確。

進一步的,如圖2所示,該方法還可以包括:

當不測試DNA系統(tǒng)調(diào)整QoS參數(shù)時,判斷是否測試DNA系統(tǒng)網(wǎng)絡擴容的功能;

當測試DNA系統(tǒng)網(wǎng)絡擴容的功能時,檢索資產(chǎn)庫;

若資產(chǎn)庫中存在需要的資產(chǎn),則調(diào)用該資產(chǎn)更新網(wǎng)絡拓撲,執(zhí)行步驟101;

若資產(chǎn)庫中不存在需要的資產(chǎn),則新增該資產(chǎn)并將資產(chǎn)更新到資產(chǎn)庫中,調(diào)用新增的資產(chǎn)更新網(wǎng)絡拓撲,執(zhí)行步驟101。

示例性的,對于通信網(wǎng)絡,由于接入設備的增加,經(jīng)常會面臨需要擴容,因此,可能需要測試網(wǎng)絡擴容后DNA系統(tǒng)拓撲展示和性能數(shù)據(jù)的處理能力。通過模擬擴容網(wǎng)絡,可以測試增加網(wǎng)元、端口、隧道、偽線、業(yè)務等資產(chǎn)后,DNA的拓撲展示和性能數(shù)據(jù)的處理能力。如果需要進行網(wǎng)絡擴容,則查找預置資產(chǎn)庫,如果資產(chǎn)庫中不存在需要的資產(chǎn),則新增資產(chǎn)并更新資產(chǎn)庫;如果存在需要的資產(chǎn),則將網(wǎng)元、端口、偽線、隧道、業(yè)務等設置為已用,然后反饋新增資產(chǎn)信息到步驟101,生成對應的資產(chǎn)文件,然后再次生成模擬性能數(shù)據(jù)后上報給DNA系統(tǒng)分析匯總,驗證網(wǎng)絡擴容后DNA系統(tǒng)分析處理的數(shù)據(jù)是否正確。

值得一提的是,在上述方案中,在生成資產(chǎn)文件的基礎上,能夠模擬端口、鏈路、網(wǎng)元、單板、偽線、隧道、業(yè)務、環(huán)網(wǎng)的性能數(shù)據(jù),和實際網(wǎng)絡環(huán)境中產(chǎn)生的數(shù)據(jù)沒有區(qū)別,并且經(jīng)過流量均衡、調(diào)整QoS參數(shù)、網(wǎng)絡擴容等操作,不斷充實性能模板庫、QoS模板庫、資產(chǎn)庫數(shù)據(jù),利用反饋信息指導重新構造性能數(shù)據(jù),能夠真實地模擬整個網(wǎng)絡動態(tài)調(diào)整、優(yōu)化、預警、升級擴容等過程,提高DNA系統(tǒng)測試的自動化、智能化程度和覆蓋率,最終達到人工測試難以實現(xiàn)的目標。

本發(fā)明實施例提供了一種深度網(wǎng)絡分析系統(tǒng)的測試方法,根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);利用模擬性能數(shù)據(jù)測試深度網(wǎng)絡分析DNA系統(tǒng)、獲取DNA系統(tǒng)對模擬性能數(shù)據(jù)分析處理后得到的數(shù)據(jù);當根據(jù)對比數(shù)據(jù)驗證分析處理后得到的數(shù)據(jù)為正確數(shù)據(jù)時,確定DNA系統(tǒng)能夠正確分析網(wǎng)絡。通過本發(fā)明實施例的方案,測試DNA系統(tǒng)時可以不受測試環(huán)境的限制并能夠提高測試效率。

為了使本領域技術人員能夠更清楚地理解本發(fā)明實施例提供的技術方案,下面通過具體的實施例,對本發(fā)明提供的深度網(wǎng)絡分析系統(tǒng)的測試方法進行詳細說明:

步驟一配置網(wǎng)絡拓撲和業(yè)務參數(shù)

示例性的,例如圖3所示為一個配置的網(wǎng)絡拓撲,其中,核心層配置40GE(GE是Gigabit Ethernet的縮寫,即1000M傳輸速率的以太網(wǎng))和10GE疊加環(huán),僅支持10GE設備時,可配置1個10GE環(huán),不配置40GE匯聚環(huán)和 10GE接入環(huán)。40GE核心環(huán)用于承載LTE模擬流量,10GE核心環(huán)用于承載2G/3G和集團客戶模擬流量。40GE核心環(huán)中PTN設備NE1、2、3、4為網(wǎng)絡側邊緣(Provider Edge,PE)設備,并且NE3、4為L2/L3轉接點,L2表示二層虛擬專用網(wǎng)(Virtual Private Network,VPN),L3表示三層虛擬專用網(wǎng)。匯聚層配置40GE和10GE環(huán)網(wǎng),僅支持10GE設備時配置1個10GE匯聚環(huán)網(wǎng)。接入層分別配置10GE和GE兩個接入環(huán)和1個GE接入鏈,僅支持10GE設備時,可配置1個GE環(huán)和接入鏈。

又例如圖4所示的一個配置的網(wǎng)絡拓撲,其中,核心層配置100GE環(huán)。綜合承載LTE模擬流量和2G/3G和集團客戶模擬流量。100GE核心環(huán)中NE1、2、3、4為PE設備,其中NE3和NE4為L2/L3橋接點,且NE3和NE4配置PTN混合板卡,下掛PTN混合板卡匯聚環(huán)。匯聚層配置1個100GE匯聚環(huán)網(wǎng)和1個PTN混合板卡匯聚環(huán),分別下掛一個10GE接入環(huán),其中一個接入環(huán)下掛10GE接入鏈。

以下,以圖3所示的網(wǎng)絡拓撲為例進行說明,40GE組網(wǎng)拓撲業(yè)務配置及優(yōu)先級設置:

如下表配置各點業(yè)務,其中LTE回傳業(yè)務配置在L2+L3VPN業(yè)務,承載在40GE核心環(huán);3G回傳及集團客戶業(yè)務配置L2(二層VPN)業(yè)務,承載在10GE核心環(huán)網(wǎng);每條業(yè)務采用單獨標記交換路徑(Label Swiching Path,LSP)承載,偽線(Pseudo Wire,PW)與LSP使用1:1配置方式。對于同源同宿的多條E1業(yè)務(E1的速率是2M/s,適用于低速業(yè)務)配置使用同一個LSP。

其中,快速重路由FRR是Fast Reroute的縮寫,虛擬局域網(wǎng)VLAN是Virtual Local Area Network的縮寫,VLAN PRI是VLAN ID中的一個字段,3個bit,表示業(yè)務優(yōu)先級,BE、AF1、AF2、AF3、AF4、EF、CS6、CS7是RFC2474標準中定義的8個優(yōu)先級。

如下表所示,通過數(shù)據(jù)網(wǎng)絡分析儀以大于集團客戶業(yè)務PIR設置值10M/s發(fā)流,測試集團客戶業(yè)務端口限速是否成功。

其中,差別服務編碼點DSCP是Differentiated Services Code Point的縮寫、DSCP是IP頭的一個字段,MPLS(Multiprotocol Label Switching,多協(xié)議標簽交換)是目前應用比較廣泛的一種骨干網(wǎng)技術。MPLS TC是MPLS中的一個字段,3個bit,用于QoS,IP多媒體系統(tǒng)IMS是IP Multimedia Subsystem的縮寫,分組交換PS是Packet Switched的縮寫。

步驟二如圖5所示將網(wǎng)絡拓撲中的網(wǎng)元、鏈路等物理信息添加進圖3中,下發(fā)偽線、隧道、業(yè)務等配置信息,或者創(chuàng)建離線網(wǎng)元,模擬真實組網(wǎng)環(huán)境。根據(jù)需要生成資產(chǎn)文件,然后將資產(chǎn)文件發(fā)送到模擬性能數(shù)據(jù)模擬流程以便生成模擬性能數(shù)據(jù)。

步驟三根據(jù)測試要求定義模擬數(shù)據(jù)的格式。

例如:1、配置文件增加版本(version)項,指定生成性能數(shù)據(jù)為“307指標資源接口方案”或者“308指標資源接口方案”;其中,“307指標資源接口方案”以及“308指標資源接口方案”是運營商中國移動規(guī)定的兩種測試時的數(shù)據(jù)格式;這里只是舉例說明,實際上并不限于某一個運營商。

2、支持生成端口、偽線、偽線維護點、隧道、隧道維護點、單板六種資產(chǎn)類型的15分鐘模擬性能數(shù)據(jù);

3、模擬性能數(shù)據(jù)名稱、字段參考“308指標資源接口方案”;

4、模擬性能數(shù)據(jù)生成滿足要求:1)端口分為5個文件,單板分為3 個文件;2)偽線、偽線維護點、隧道、隧道維護點性能數(shù)據(jù)為單點性能數(shù)據(jù);3)偽線維護點文件、隧道維護點文件滿足“308指標資源接口方案”中的格式;

5、只有以太網(wǎng)端口生成性能數(shù)據(jù)。

需要說明的是,上述內(nèi)容均屬于現(xiàn)有的內(nèi)容,具體可參考中國移動制定的測試標準文檔,在此不做詳細說明。

步驟四根據(jù)步驟二生成的資產(chǎn)文件和步驟三確定的格式生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

模擬性能數(shù)據(jù)作為原始數(shù)據(jù)發(fā)送到DNA系統(tǒng)進行分析處理;對比數(shù)據(jù)是按照測試要求生成的結果數(shù)據(jù),作為DNA系統(tǒng)最終分析處理結果的參照標準。例如構造模擬性能數(shù)據(jù):網(wǎng)元1端口1在某時間點的出流量為5M,下一時刻出流量為10M,告警閾值為4M時觸發(fā)嚴重級別告警。承載的業(yè)務名為業(yè)務1,業(yè)務2。QoS參數(shù)CIR和PIR都是20M。在模擬性能數(shù)據(jù)中記錄原始數(shù)據(jù)。對比數(shù)據(jù)中除了記錄原始數(shù)據(jù),還記錄計算匯總后的數(shù)據(jù),如:按小時匯總后該端口的出流量為15M。相關聯(lián)的偽線、隧道、業(yè)務流量數(shù)據(jù)也一同在步驟四生成。

步驟五DNA系統(tǒng)按照普通邏輯進行分析處理:以端口1的出流量為例,數(shù)據(jù)采集模塊以15分鐘粒度采集模擬性能數(shù)據(jù)5M和10M,初步處理后上報給計算模塊;計算模塊根據(jù)指標定義公式計算出其他關聯(lián)數(shù)據(jù)如出帶寬利用率為1%;到規(guī)定時間后按照時、日、月、年的粒度將數(shù)據(jù)匯總入庫,如某小時的出流量為15M。查詢時在系統(tǒng)的顯示模塊設置自定義條件:鉆取某年某月某日某小時某個網(wǎng)元端口1的出流量,將獲取的數(shù)據(jù)15M和對比數(shù)據(jù)庫中的正確數(shù)據(jù)進行比較。如果數(shù)據(jù)錯誤,收集錯誤信息后結束測試;如果數(shù)據(jù)正確,進入下一步驟。

步驟六由于該數(shù)據(jù)處于告警閾值范圍外,已經(jīng)產(chǎn)生告警。如果不測試解除預警,則進入下一步驟。如果測試解除預警,則判斷是否修改模擬性能數(shù)據(jù),如果不修改模擬性能數(shù)據(jù),就需要修改告警閾值,使告警閾值范圍能夠覆蓋該出流量值,例如將告警閾值設為20M。將修改后的告警閾值反饋到DNA 系統(tǒng),等待下一時刻的數(shù)據(jù)例如10M進入,處理后再次進行判斷,數(shù)據(jù)正確且在告警閾值20M范圍內(nèi),不觸發(fā)告警,處理正確,繼續(xù)進行下一步驟測試。

如果修改性能數(shù)據(jù),首先檢索性能數(shù)據(jù)模板庫,如果不存在合適的模板,需要將新增模板導入到庫中;如果存在合適的模板,以告警閾值4M為條件,套用該模板計算出下一時刻需要修改的數(shù)據(jù),其中端口1的出流量為2M,目的是不觸發(fā)告警,反饋至步驟二,以此為基礎生成完整數(shù)據(jù)。DNA系統(tǒng)接收數(shù)據(jù)后再次處理并判斷,端口1的出流量為2M,在閾值范圍內(nèi),不觸發(fā)告警,分析處理正確,進入下一步驟。

步驟七如果不測試均衡流量,進入下一步驟;如果測試均衡流量,需要在已存在的網(wǎng)元、鏈路、端口等資源上平均分配業(yè)務數(shù)量或業(yè)務上的流量。根據(jù)設定的分配原則更新資產(chǎn)庫中的數(shù)據(jù),將承載業(yè)務2的隧道、偽線配置為不經(jīng)過端口1,經(jīng)過網(wǎng)元2的端口2。修改的數(shù)據(jù)反饋到步驟二,按照流量均衡的要求將原始流量平均分配,假設生成新環(huán)境下端口1的流量為2.5M,端口2的流量為2.5M。DNA系統(tǒng)接收數(shù)據(jù)后再次處理并判斷,網(wǎng)絡優(yōu)化后數(shù)據(jù)正確,進入下一步驟。

步驟八如果不測試調(diào)整QoS參數(shù),進入下一步驟;如果測試調(diào)整QoS參數(shù),首先檢索QoS參數(shù)模板庫,如果不存在合適的模板,需要將新增模板導入到QoS參數(shù)模板庫中;如果存在合適的模板,以流量10M為條件,假設套用該模板計算出CIR和PIR都為12M,將修改后的配置反饋至步驟一,按照正常流程重新生成資產(chǎn)文件和端口1的性能數(shù)據(jù)10M。DNA系統(tǒng)接收數(shù)據(jù)后再次處理并判斷,端口1的出流量為10M,數(shù)據(jù)正確,CIR和PIR都為12M,達到了優(yōu)化調(diào)整的目的,進入下一步驟。

步驟九如果不測試網(wǎng)絡擴容,測試結束;如果測試網(wǎng)絡擴容,首先檢索資產(chǎn)庫,如果不存在需要的資產(chǎn),需要將新增資產(chǎn)導入到庫中;如果存在需要的資產(chǎn),使用新增的網(wǎng)元3端口3,承載新業(yè)務3。將修改后的配置反饋至步驟一,按照正常流程重新生成資產(chǎn)文件和端口3的性能數(shù)據(jù)10M。DNA系統(tǒng)接收數(shù)據(jù)后再次處理并判斷,端口3的出流量為10M,數(shù)據(jù)正確,提供了新增業(yè)務3,網(wǎng)絡擴容測試結束。

本發(fā)明實施例還提供一種用于測試深度網(wǎng)絡分析DNA系統(tǒng)的裝置10, 如圖6所示,該裝置10包括:

配置模塊11,用于根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;

生成數(shù)據(jù)模塊12,用于根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);

測試模塊13,用于利用模擬性能數(shù)據(jù)測試深度網(wǎng)絡分析DNA系統(tǒng)、獲取DNA系統(tǒng)對模擬性能數(shù)據(jù)分析處理后得到的數(shù)據(jù);

驗證模塊14,用于當根據(jù)對比數(shù)據(jù)驗證分析處理后得到的數(shù)據(jù)為正確數(shù)據(jù)時,確定DNA系統(tǒng)能夠正確分析網(wǎng)絡。

進一步的,測試模塊13還用于:

當分析處理后得到的數(shù)據(jù)超過DNA系統(tǒng)中預設的告警閾值,觸發(fā)DNA系統(tǒng)告警時,判斷是否測試DNA系統(tǒng)解除告警的功能;

當測試DNA系統(tǒng)解除告警的功能時,判斷是否修改模擬性能數(shù)據(jù)

當修改模擬性能數(shù)據(jù)時,檢索性能數(shù)據(jù)模板庫,若性能數(shù)據(jù)模板庫中存在需要的性能數(shù)據(jù)模板,則調(diào)用性能數(shù)據(jù)模板修改模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試DNA系統(tǒng)是否解除告警;若性能數(shù)據(jù)模板庫不存在需要的性能數(shù)據(jù)模板,則新增性能數(shù)據(jù)模板并將性能數(shù)據(jù)模板更新到性能數(shù)據(jù)模板庫中,采用新增的性能數(shù)據(jù)模板修改模擬性能數(shù)據(jù),根據(jù)修改后的模擬性能數(shù)據(jù)測試DNA系統(tǒng)是否解除告警;

當不修改模擬性能數(shù)據(jù)時,修改告警閾值,根據(jù)修改后的告警閾值測試DNA系統(tǒng)是否解除告警。

進一步的,測試模塊13還用于:

當未觸發(fā)DNA系統(tǒng)告警或者不測試解除告警的功能時,判斷是否測試DNA系統(tǒng)均衡流量的功能;

當測試DNA系統(tǒng)均衡流量的功能時,對網(wǎng)絡拓撲中的業(yè)務路徑進行調(diào)整并根據(jù)調(diào)整修改資產(chǎn)文件,執(zhí)行根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

進一步的,測試模塊13還用于:

當不測試DNA系統(tǒng)均衡流量的功能時,判斷是否測試DNA系統(tǒng)調(diào)整服 務質(zhì)量QoS參數(shù)的功能;

當測試DNA系統(tǒng)調(diào)整QoS參數(shù)的功能時,檢索QoS參數(shù)模板庫;

若QoS參數(shù)模板庫中存在需要的QoS參數(shù)模板,則調(diào)用QoS參數(shù)模板并修改業(yè)務參數(shù),根據(jù)修改后的業(yè)務參數(shù)更新資產(chǎn)文件,執(zhí)行根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);

若QoS參數(shù)模板庫中不存在需要的QoS參數(shù)模板,則新增QoS參數(shù)模板并將QoS參數(shù)模板更新到QoS參數(shù)模板庫中,調(diào)用新增的QoS參數(shù)模板并修改業(yè)務參數(shù),根據(jù)修改后的業(yè)務參數(shù)更新資產(chǎn)文件,執(zhí)行根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù)。

進一步的,測試模塊13還用于:

當不測試DNA系統(tǒng)調(diào)整QoS參數(shù)的功能時,判斷是否測試DNA系統(tǒng)網(wǎng)絡擴容的功能;

當測試DNA系統(tǒng)網(wǎng)絡擴容的功能時,檢索資產(chǎn)庫;

若資產(chǎn)庫中存在需要的資產(chǎn),則調(diào)用資產(chǎn)更新網(wǎng)絡拓撲,執(zhí)行根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;

若資產(chǎn)庫中不存在需要的資產(chǎn),則新增資產(chǎn)并將資產(chǎn)更新到資產(chǎn)庫中,調(diào)用新增的資產(chǎn)更新網(wǎng)絡拓撲,執(zhí)行根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件。

本實施例用于實現(xiàn)上述各方法實施例,本實施例中各個單元的工作流程和工作原理參見上述各方法實施例中的描述,在此不再贅述。

本發(fā)明實施例提供的一種用于測試深度網(wǎng)絡分析系統(tǒng)的裝置,根據(jù)配置的網(wǎng)絡拓撲和業(yè)務參數(shù)生成資產(chǎn)文件;根據(jù)資產(chǎn)文件生成模擬性能數(shù)據(jù)和對比數(shù)據(jù);利用模擬性能數(shù)據(jù)測試深度網(wǎng)絡分析DNA系統(tǒng)、獲取DNA系統(tǒng)對模擬性能數(shù)據(jù)分析處理后得到的數(shù)據(jù);當根據(jù)對比數(shù)據(jù)驗證分析處理后得到的數(shù)據(jù)為正確數(shù)據(jù)時,確定DNA系統(tǒng)能夠正確分析網(wǎng)絡。通過本發(fā)明實施例的方案,測試DNA系統(tǒng)時可以不受測試環(huán)境的限制并能夠提高測試效率。

雖然本發(fā)明所揭露的實施方式如上,但所述的內(nèi)容僅為便于理解本發(fā)明 而采用的實施方式,并非用以限定本發(fā)明。任何本發(fā)明所屬領域內(nèi)的技術人員,在不脫離本發(fā)明所揭露的精神和范圍的前提下,可以在實施的形式及細節(jié)上進行任何的修改與變化,但本發(fā)明的專利保護范圍,仍須以所附的權利要求書所界定的范圍為準。

當前第1頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
大荔县| 大渡口区| 建湖县| 榆林市| 读书| 从化市| 抚顺县| 柘荣县| 墨江| 诏安县| 丰城市| 抚松县| 松江区| 应用必备| 增城市| 赣榆县| 邵阳县| 恩平市| 左贡县| 肥乡县| 南岸区| 河东区| 广西| 宽城| 攀枝花市| 夏邑县| 祁门县| 北辰区| 辽阳县| 临颍县| 五寨县| 宜都市| 昌宁县| 海城市| 澄城县| 建德市| 林周县| 东城区| 文水县| 蒲城县| 榆中县|