專利名稱:一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法
一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法技術(shù)領(lǐng)域
本發(fā)明屬于網(wǎng)絡(luò)存儲中元數(shù)據(jù)服務(wù)器(MDS,MetaData Server)技術(shù)領(lǐng)域,特別是涉及一種基于權(quán)重的MDS集群動態(tài)負載均衡方法。
背景技術(shù):
對象存儲(OBS,Object-based Morage)技術(shù)將文件數(shù)據(jù)和元數(shù)據(jù)分開存儲,綜合傳統(tǒng)NAS和SAN的優(yōu)點,同時具備SAN的快速訪問和NAS的跨平臺數(shù)據(jù)共享等優(yōu)勢。同時對象存儲設(shè)備(OSD,Object-based Device)本身具備智能管理功能。因此OBS系統(tǒng)具有高性能、可擴展、高可用性和強安全性等特點。OBS系統(tǒng)主要由三部分組成,分別為客戶端、MDS集群和OSD集群。其中MDS在對象存儲系統(tǒng)中名字空間、控制用戶訪問和映射文件物理存儲位置的角色。雖然單個元數(shù)據(jù)數(shù)據(jù)量很小,但涉及文件元數(shù)據(jù)的操作卻非常頻繁。 元數(shù)據(jù)處理能力是整個對象存儲系統(tǒng)高效運作的重要一環(huán)。以Hadoop和Lustre為代表的集中式元數(shù)據(jù)處理方案存在單點故障和性能瓶頸的問題。為了保證OBS系統(tǒng)元數(shù)據(jù)的處理能力,由多臺MDS服務(wù)器協(xié)同合作構(gòu)成MDS集群的分布式處理方案是發(fā)展方向。
為了在有限資源下最大化MDS集群元數(shù)據(jù)處理能力,防止任意MDS成為系統(tǒng)瓶頸, MDS之間的負載均衡就顯得非常重要。MDS集群負載均衡方面的研究主要集中在數(shù)據(jù)分區(qū)和服務(wù)器性能評估兩個方面。
數(shù)據(jù)分區(qū)主要研究文件系統(tǒng)元數(shù)據(jù)在MDS中的分布問題,主要有以NFS和Gph為代表的目錄子樹分區(qū)和zFS和Lazy Hybrid為代表的Hash分布。
1.目錄子樹分區(qū)的優(yōu)點是利用了文件訪問的局部性原理,能夠快速遍歷文件系統(tǒng)。它主要可分為靜態(tài)子樹分區(qū)和動態(tài)子樹分區(qū)。前者的設(shè)計簡單,數(shù)據(jù)存儲負載分布需要管理員手動指定,在負載出現(xiàn)變化時不能及時調(diào)整,主要適用于TB級存儲規(guī)模;后者設(shè)計較為復雜,適用于PB級海量數(shù)據(jù)數(shù)據(jù)應(yīng)用場景,是當前的研究熱點。
2. Hash分布利用文件絕對路徑或其它唯一標識來決定元數(shù)據(jù)的存放位置,該策略的優(yōu)點是簡單高效,客戶端能夠直接定位文件。而且由于它徹底散列化了文件分布,有效的避免了由于局部性訪問引起單個目錄集中訪問。但是Hash分布在MDS數(shù)量發(fā)生改變時通常導致大量數(shù)據(jù)遷移。
服務(wù)器性能評估主要研究準確評價服務(wù)器固有性能的問題。一般而言,服務(wù)器的處理能力主要與CPU、內(nèi)存、網(wǎng)絡(luò)帶寬、磁盤性能等相關(guān)。有研究者對上述影響參數(shù)進行排序,根據(jù)影響力的大小確定權(quán)重,并以一定的系數(shù)計算加權(quán)值來綜合考慮設(shè)備的處理能力。 但是上述“白盒”性能模型面臨兩個問題一方面,不同負載類型通常會有不同負載特征, 對服務(wù)器要求的側(cè)重點也不一樣;另一方面,影響因子之間存在互相制約關(guān)系,例如某個影響因子配置過低,成為性能瓶頸后,再增加其它影響因子的配置對MDS元數(shù)據(jù)處理性能提升并不明顯。因此,上述方案很難準確地量化每個因子的影響力。如果權(quán)重系數(shù)選擇不當, 反而會影響系統(tǒng)性能。發(fā)明內(nèi)容
本發(fā)明的目的在于針對已有技術(shù)沒有考慮MDS集群中設(shè)備異構(gòu)情況和服務(wù)器固有性能難以量化的問題,本發(fā)明提出了一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法。
本發(fā)明方法利用最小二乘法并行請求數(shù)和平均操作延時的映射關(guān)系曲線進行線性擬合,并得出擬合曲線斜率用于反應(yīng)MDS的固有性能,為均衡負載提供了依據(jù);根據(jù)集群中MDS的處理能力分配對應(yīng)比例的工作負載,從而使得MDS集群在設(shè)備異構(gòu)情況下保持負載均衡以達到較高的整體吞吐量。實驗證明本發(fā)明方法開銷小、動態(tài)調(diào)整工作負載、元數(shù)據(jù)服務(wù)器集群在設(shè)備異構(gòu)情況下保持負載均衡。
本發(fā)明具體步驟為1在元數(shù)據(jù)服務(wù)器空載狀態(tài)下,通過基準測試工具mdtest測得每臺元數(shù)據(jù)服務(wù)器在不同并行服務(wù)請求數(shù)下的平均操作延時。
2利用最小二乘法對步驟1中測得并行請求數(shù)和平均操作延時的映射關(guān)系曲線進行線性擬合,并得出擬合曲線斜率,然后將斜率值的倒數(shù)作為權(quán)重輸入元數(shù)據(jù)服務(wù)器配置參數(shù)表。
3每臺元數(shù)據(jù)服務(wù)器開啟一個守護進程,對服務(wù)器處理的訪問請求數(shù)計數(shù)作為參數(shù)得出服務(wù)器的當前負載,記錄請求時間。
4每個心跳周期時間到時,元數(shù)據(jù)服務(wù)器通過UDP協(xié)議向集群中其它所有元數(shù)據(jù)服務(wù)器廣播自己的當前負載水平和權(quán)重,并記錄發(fā)送時間。
5元數(shù)據(jù)服務(wù)器接收完畢集群中其它服務(wù)器廣播信息后,計算出目標負載。
6將服務(wù)器的當前其當前負載與步驟5中目標負載相減,如果差值為正并且大于閾值,則執(zhí)行步驟7 ;如果差值為不為正并且大于閾值則轉(zhuǎn)至步驟8。
7啟動目錄子樹遷移過程,根據(jù)當前負載和目標負載的差值,選擇負載和為差值的目錄子樹遷移到當前負載低于目標負載的元數(shù)據(jù)服務(wù)器。
8判斷負載均衡任務(wù)是否結(jié)束,如果負載均衡任務(wù)結(jié)束,則任務(wù)結(jié)束;如果負載均衡任務(wù)沒有結(jié)束,則返回至步驟3。
步驟3中所述服務(wù)器的當前負載由以下方法得出1)對元數(shù)據(jù)服務(wù)器中每個目錄和文件設(shè)置對應(yīng)的負載計數(shù)器,并以此衡量該文件和目錄的負載。
2)當服務(wù)器處理服務(wù)請求時,與之對應(yīng)的負載計數(shù)器就會增加1。
3)元數(shù)據(jù)服務(wù)器的當前負載為其所包含的所有目錄和文件的負載計數(shù)器值之和。
所述計數(shù)器值會隨時間呈指數(shù)型衰減。
步驟4中所述心跳周期通過元數(shù)據(jù)服務(wù)器配置參數(shù)設(shè)置。
所述目標負載的 計算公式為 Iarg ei. Joadi =蚵/ WmsiHotalJoad ;其中IargetJoadi編號為i的服務(wù)器的目標負載,Wi編號為i的服務(wù)器的權(quán)重,Wtotal為集群中所有元數(shù)據(jù)服務(wù)器權(quán)重之和,total_load為集群中所有元數(shù)據(jù)服務(wù)器當前負載之和。
所述目錄子樹遷移過程,包括以下步驟A初始化Importer_set禾口 Exporter_set為空,Importer_set表示當前負載低于目標負載的元數(shù)據(jù)服務(wù)器集合,Exporter_set表示當前負載大于目標負載的元數(shù)據(jù)服務(wù)器集
B遍歷集群中所有元數(shù)據(jù)服務(wù)器節(jié)點,將每個節(jié)點的當前其當前負載與目標負載相減,如果差值為正并且大于閾值,則將該將節(jié)點歸入EXp0rter_set ;如果差值為負并且絕對值大于閾值,則將該將節(jié)點歸入Imp0rter_set。
C從步驟A所述Exp0rter_Set中選取元數(shù)據(jù)服務(wù)器,記作MDSi,并將步驟B所述差值記為IMi。
D從Imp0rter_Set選取元數(shù)據(jù)服務(wù)器,記作MDSp并將所述步驟B所述差值的絕對值記作IMj。
E比較步驟C所述IMi和D所述IMj,并將兩者的較小值記作Riiig,在步驟C所述 MDSi中選取負載值為Riiig的目錄子樹遷移到步驟D所述MD。。
F更新步驟C所述IMi為IMi和步驟E所述Riiig相減的差值,更新步驟D所述IMj 為IMj和步驟E所述Riiig相減的差值。
G判斷是否步驟F中所述更新后的IMi小于或等于閾值,如果步驟F中所述更新后的IMi小于或等于閾值則執(zhí)行H ;如果步驟F中所述更新后的IMi大于閾值,則返回至步驟 D0
H判斷是否已經(jīng)遍歷完Exporter_set中所有節(jié)點,如果已經(jīng)遍歷完Exporter_set 中所有節(jié)點,則遷移過程結(jié)束;如果沒有遍歷完Exp0rter_Set中所有節(jié)點,則返回至步驟 C0
所述閾值通過元數(shù)據(jù)服務(wù)器配置參數(shù)設(shè)置。
與已有技術(shù)方案相比,本發(fā)明主要的優(yōu)點有1.根據(jù)MDS固有性能按比例分配相應(yīng)工作負載,并能根據(jù)當前負載進行動態(tài)調(diào)整,支持異構(gòu)MDS集群。
2.屏蔽MDS底層配置細節(jié),避免了性能模型中量化影響因子的難題準確評估MDS 的元數(shù)據(jù)處理能力。
圖1為實測并行服務(wù)請求數(shù)和平均操作延時的關(guān)系圖。
圖2為對象存儲系統(tǒng)的典型框架圖。
圖3為是MDS集群中文件系統(tǒng)名字空間的分布。
圖4為本發(fā)明的總體流程圖。
圖5為本發(fā)明的目錄子樹流程圖。
具體實施方式
本發(fā)明方法應(yīng)用于對象存儲系統(tǒng)中,對象存儲系統(tǒng)主要由三部分組成,分別為客戶端、MDS集群和OSD集群,參看圖2。OSD集群將數(shù)據(jù)和元數(shù)據(jù)作為對象存儲;客戶端為用戶提供訪問接口 ;元數(shù)據(jù)服務(wù)器管理文件系統(tǒng)名字空間(參見圖3)、控制用戶訪問和映射文件物理存儲位置,并周期性地共享各自的負載水平,當某一臺MDS的負載超過集群平均值一定閥值后,將啟動子樹遷移,根據(jù)過載的負載選擇適當?shù)哪夸涀訕溥w移到負載較輕的節(jié)點,以均衡系統(tǒng)負載。
本發(fā)明的總體邏輯流程如下,參見圖4 1在元數(shù)據(jù)服務(wù)器空載狀態(tài)下,通過基準測試工具mdtest測得每臺元數(shù)據(jù)服務(wù)器在不同并行服務(wù)請求數(shù)下的平均操作延時。
2利用最小二乘法對步驟1中測得并行請求數(shù)和平均操作延時的映射關(guān)系曲線進行線性擬合,并得出擬合曲線斜率,然后將斜率值的倒數(shù)作為權(quán)重輸入元數(shù)據(jù)服務(wù)器配置參數(shù)表。圖1為實測并行服務(wù)請求數(shù)和平均操作延時的關(guān)系圖。從圖1中可以得出a隨著客戶端數(shù)量的增加,MDS的平均操作延時也呈現(xiàn)線性增加;b隨著MDS性能增強,對應(yīng)的擬合曲線斜率單調(diào)減小。
3每臺元數(shù)據(jù)服務(wù)器開啟一個守護進程,對服務(wù)器處理的訪問請求數(shù)計數(shù)作為參數(shù)得出服務(wù)器的當前負載,記錄請求時間。
4每個心跳周期時間到時,元數(shù)據(jù)服務(wù)器通過UDP協(xié)議向集群中其它所有元數(shù)據(jù)服務(wù)器廣播自己的當前負載水平和權(quán)重,并記錄發(fā)送時間。心跳周期通過元數(shù)據(jù)服務(wù)器配置參數(shù)設(shè)置。
5元數(shù)據(jù)服務(wù)器接收完畢集群中其它服務(wù)器廣播信息后,計算出目標負載。
6將服務(wù)器的當前其當前負載與步驟5中目標負載相減,如果差值為正并且大于閾值,則執(zhí)行步驟7 ;如果差值為不為正并且大于閾值則轉(zhuǎn)至步驟8閾值通過元數(shù)據(jù)服務(wù)器配置參數(shù)設(shè)置。
7啟動目錄子樹遷移過程,根據(jù)當前負載和目標負載的差值,選擇負載和為差值的目錄子樹遷移到當前負載低于目標負載的元數(shù)據(jù)服務(wù)器。
8當計時周期結(jié)束時,判斷負載均衡任務(wù)是否結(jié)束,如果負載均衡任務(wù)結(jié)束,則任務(wù)結(jié)束;如果負載均衡任務(wù)沒有結(jié)束,則重復計算當前負載和廣播服務(wù)器負載水平和的過程,即返回至步驟3。
步驟3中所述服務(wù)器的當前負載由以下方法得出1)對元數(shù)據(jù)服務(wù)器中每個目錄和文件設(shè)置對應(yīng)的負載計數(shù)器,并以此衡量該文件和目錄的負載;2)當服務(wù)器處理服務(wù)請求時,與之對應(yīng)的負載計數(shù)器就會增加1;3)元數(shù)據(jù)服務(wù)器的當前負載為其所包含的所有目錄和文件的負載計數(shù)器值之和;所述計數(shù)器計數(shù)值會隨時間呈指數(shù)型衰減,衰減函數(shù)為= ^"1*5% ,其中At 為最近一次訪問請求數(shù)的記錄時間與當前時間的差值。
所述目標負載的計算公式為 arg招J— = Wi f Wt-Hoial Joctd ;其中target_Ioadi編號為i的服務(wù)器的目標負載,Wi編號為i的服務(wù)器的權(quán)重,Wt。tal為集群中所有元數(shù)據(jù)服務(wù)器權(quán)重之和,total_load為集群中所有元數(shù)據(jù)服務(wù)器當前負載之和。
圖5為本發(fā)明的目錄子樹遷移流程,具體過程包括以下步驟A初始化Importer_set禾口 Exporter_set為空,Importer_set表示當前負載低于目標負載的元數(shù)據(jù)服務(wù)器集合,Exporter_set表示當前負載大于目標負載的元數(shù)據(jù)服務(wù)器集合;B遍歷集群中所有元數(shù)據(jù)服務(wù)器節(jié)點,將每個節(jié)點的當前其當前負載與目標負載相減, 如果差值為正并且大于閾值,則將該將節(jié)點歸入EXp0rter_set ;如果差值為負并且絕對值大于閾值,則將該將節(jié)點歸入Imp0rter_set ;C從步驟A所述EXp0rter_set中選取元數(shù)據(jù)服務(wù)器,記作MDSi,并將步驟B所述差值記為IMi ;D從Imp0rter_set選取元數(shù)據(jù)服務(wù)器,記作MD。,并將所述步驟B所述差值的絕對值記作IMj ;E比較步驟C所述IMi和D所述IMj,并將兩者的較小值記作Riiig,在步驟C所述MDSi 中選取負載值為Riiig的目錄子樹遷移到步驟D所述MD^ ;F更新步驟C所述IMi為IMi和步驟E所述Riiig相減的差值,更新步驟D所述IMj為 IMj和步驟E所述Riiig相減的差值;G判斷是否步驟F中所述更新后的IMi小于或等于閾值,如果步驟F中所述更新后的 IMi小于或等于閾值則執(zhí)行H ;如果步驟F中所述更新后的IMi大于閾值,則返回至步驟D ; H判斷是否已經(jīng)遍歷完Exporter_set中所有節(jié)點,如果已經(jīng)遍歷完Exporter_set中所有節(jié)點,則遷移過程結(jié)束;如果沒有遍歷完Exp0rter_Set中所有節(jié)點,則返回至步驟C。
由于過載節(jié)點的負載輸出量和輕負載節(jié)點的引進量并非一定能一一對應(yīng),多數(shù)情況下需要多個節(jié)點協(xié)調(diào)完成上述負載遷移過過程。例如,MDSi需要輸出大量負載,這時需要把過載負載分別遷移到多個輕載節(jié)點。遷移過程首先會在MDSi中搜索負載和為Riiig的目錄子樹,然后將轉(zhuǎn)移到的輕負載節(jié)點MDSp每個目錄子樹代表一定的訪問負載,因此把目錄子樹遷移也就意味著工作負載的轉(zhuǎn)移。這樣每個MDS節(jié)點能夠根據(jù)自身的處理能力分配到相應(yīng)比例的工作負載,最終使MDS集群達到負載均衡。
權(quán)利要求
1.一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于該方法包括以下步驟步驟1.在元數(shù)據(jù)服務(wù)器空載狀態(tài)下,通過基準測試工具mdtest測得每臺元數(shù)據(jù)服務(wù)器在不同并行服務(wù)請求數(shù)下的平均操作延時;步驟2.利用最小二乘法對步驟1中并行請求數(shù)和平均操作延時的映射關(guān)系曲線進行線性擬合,并得出擬合曲線斜率,然后將斜率值的倒數(shù)作為權(quán)重輸入元數(shù)據(jù)服務(wù)器配置參數(shù)表;步驟3.每臺元數(shù)據(jù)服務(wù)器開啟一個守護進程,對服務(wù)器處理的訪問請求進行計數(shù),并把計數(shù)器值作為參數(shù)得出服務(wù)器的當前負載,記錄請求時間;步驟4.每個心跳周期時間到時,元數(shù)據(jù)服務(wù)器通過UDP協(xié)議向集群中其它所有元數(shù)據(jù)服務(wù)器廣播自己的當前負載水平和權(quán)重,并記錄發(fā)送時間;步驟5.元數(shù)據(jù)服務(wù)器接收完畢集群中其它服務(wù)器廣播信息后,計算出目標負載; 步驟6.將服務(wù)器的當前其當前負載與步驟5中目標負載相減,如果差值為正并且大于閾值,則執(zhí)行步驟7 ;如果差值為不為正并且大于閾值則轉(zhuǎn)至步驟8 ;步驟7.啟動目錄子樹遷移過程,根據(jù)當前負載和目標負載的差值,選擇負載和為差值的目錄子樹遷移到當前負載低于目標負載的元數(shù)據(jù)服務(wù)器;步驟8.判斷負載均衡任務(wù)是否結(jié)束,如果負載均衡任務(wù)結(jié)束,則任務(wù)結(jié)束;如果負載均衡任務(wù)沒有結(jié)束,則返回至步驟3。
2.根據(jù)權(quán)利要求1所述的一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于步驟3所述服務(wù)器的當前負載由以下方法得出對元數(shù)據(jù)服務(wù)器中每個目錄和文件設(shè)置對應(yīng)的負載計數(shù)器,并以此衡量該文件和目錄的負載;當服務(wù)器處理服務(wù)請求時,與之對應(yīng)的負載計數(shù)器就會增加1 ; 元數(shù)據(jù)服務(wù)器的當前負載為其所包含的所有目錄和文件的負載計數(shù)器值之和。
3.根據(jù)權(quán)利要求1或2所述的一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于所述計數(shù)器值會隨時間呈指數(shù)型衰減。
4.根據(jù)權(quán)利要求1所述的一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于步驟4中所述心跳周期通過元數(shù)據(jù)服務(wù)器配置參數(shù)設(shè)置。
5.根據(jù)權(quán)利要求1所述的一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于步驟5所述目標負載的計算公式為 iarg st Joadi = Wj / W^mHotalJoad ;其中 IargetJoadi 編號為 i 的服務(wù)器的目標負載,Wi編號為i的服務(wù)器的權(quán)重,Wtotal為集群中所有元數(shù)據(jù)服務(wù)器權(quán)重之和,total_load為集群中所有元數(shù)據(jù)服務(wù)器當前負載之和。
6.根據(jù)權(quán)利要求1所述的一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于步驟7所述目錄子樹遷移過程,包括以下步驟A.初始化Importer_set禾口 Exporter_set為空,Importer_set表示當前負載低于目標負載的元數(shù)據(jù)服務(wù)器集合,EXp0rter_set表示當前負載大于目標負載的元數(shù)據(jù)服務(wù)器集合;B.遍歷集群中所有元數(shù)據(jù)服務(wù)器節(jié)點,將每個節(jié)點的當前其當前負載與目標負載相減,如果差值為正并且大于閾值,則將該將節(jié)點歸入EXp0rter_set ;如果差值為負并且絕對值大于閾值,則將該將節(jié)點歸入Imp0rter_set ;C.從步驟A所述EXp0rter_set中選取元數(shù)據(jù)服務(wù)器,記作MDSi,并將步驟B所述差值記為IMi ;D.從Imp0rter_set選取元數(shù)據(jù)服務(wù)器,記作MD。,并將所述步驟B所述差值的絕對值記作IMj ;E.比較步驟C所述IMi和D所述IMj,并將兩者的較小值記作Riiig,在步驟C所述MDSi 中選取負載值為Riiig的目錄子樹遷移到步驟D所述MD^ ;F.更新步驟C所述IMi為IMi和步驟E所述Riiig相減的差值,更新步驟D所述IMj為 IMj和步驟E所述Riiig相減的差值;G.判斷是否步驟F中所述更新后的IMi小于或等于閾值,如果步驟F中所述更新后的 IMi小于或等于閾值則執(zhí)行H ;如果步驟F中所述更新后的IMi大于閾值,則返回至步驟D ;H.判斷是否已經(jīng)遍歷完Exporter_set中所有節(jié)點,如果已經(jīng)遍歷完Exporter_set中所有節(jié)點,則遷移過程結(jié)束;如果沒有遍歷完Exp0rter_Set中所有節(jié)點,則返回至步驟C。
7.根據(jù)權(quán)利要求1或6所述的一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法,其特征在于所述閾值通過元數(shù)據(jù)服務(wù)器配置參數(shù)設(shè)置。
全文摘要
本發(fā)明涉及一種基于權(quán)重的元數(shù)據(jù)服務(wù)器集群負載均衡方法。元數(shù)據(jù)服務(wù)器是對象存儲系統(tǒng)的重要組成部分,扮演管理文件系統(tǒng)名字空間、控制用戶訪問和映射文件物理存儲位置的角色。本發(fā)明通過收集元數(shù)據(jù)服務(wù)并行處理的服務(wù)請求數(shù)和平均操作延時,利用最小二乘法對兩者的映射關(guān)系曲線進行線性擬合,將擬合曲線斜率值的倒數(shù)作為元數(shù)據(jù)服務(wù)器的固有性能;通過對工作負載根據(jù)元數(shù)據(jù)服務(wù)器的固有性能作為權(quán)重進行按比例分配,使其支持異構(gòu)元數(shù)據(jù)服務(wù)器集群。本發(fā)明方法開銷小、動態(tài)調(diào)整工作負載、元數(shù)據(jù)服務(wù)器集群在設(shè)備異構(gòu)情況下保持負載均衡。
文檔編號H04L29/08GK102523158SQ20111042024
公開日2012年6月27日 申請日期2011年12月15日 優(yōu)先權(quán)日2011年12月15日
發(fā)明者萬健, 任永堅, 張紀林, 徐向華, 殷昱煜, 蔣從鋒, 錢偉 申請人:杭州電子科技大學