一種數(shù)據(jù)回源的方法、裝置及邊緣服務(wù)器的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及數(shù)據(jù)傳輸領(lǐng)域，特別涉及一種數(shù)據(jù)回源的方法、裝置及邊緣服務(wù)器。
【背景技術(shù)】
[0002]目前，數(shù)據(jù)存儲(chǔ)網(wǎng)絡(luò)普遍采用分層的拓?fù)浣Y(jié)構(gòu)，其中:由一個(gè)或幾個(gè)中心存儲(chǔ)服務(wù)器集群作為中心存儲(chǔ)器，存儲(chǔ)全部的數(shù)據(jù)，這些存儲(chǔ)器是不對(duì)客戶端服務(wù)的；中心存儲(chǔ)器連接邊緣服務(wù)器，中心存儲(chǔ)器不對(duì)客戶端服務(wù)，由邊緣服務(wù)器對(duì)客戶端提供服務(wù)。由于邊緣服務(wù)器不可能存儲(chǔ)全部數(shù)據(jù)，因此，會(huì)出現(xiàn)客戶端設(shè)備向邊緣服務(wù)器請(qǐng)求數(shù)據(jù)而該服務(wù)器沒有相應(yīng)數(shù)據(jù)的情況。此時(shí)，邊緣服務(wù)器就需要向后端的中心存儲(chǔ)器請(qǐng)求數(shù)據(jù)，并將所請(qǐng)求到的數(shù)據(jù)轉(zhuǎn)發(fā)給客戶端設(shè)備，這個(gè)邊緣服務(wù)器向后端的中心存儲(chǔ)器請(qǐng)求數(shù)據(jù)再轉(zhuǎn)發(fā)給客戶端設(shè)備的過程就被稱為:數(shù)據(jù)回源。
[0003]在現(xiàn)有技術(shù)中，若客戶端只需要一個(gè)文件的某一個(gè)部分的數(shù)據(jù)，邊緣服務(wù)器仍會(huì)下載該文件的全部數(shù)據(jù)，并存儲(chǔ)該文件的全部數(shù)據(jù)，然后把用戶需要的那部分轉(zhuǎn)發(fā)給用戶，這樣就會(huì)多下載用戶不需要的文件數(shù)據(jù)，造成了帶寬浪費(fèi)；其次，邊緣服務(wù)器不會(huì)存儲(chǔ)所述完整文件數(shù)據(jù)中的用戶需要的那部分文件數(shù)據(jù)，當(dāng)有客戶端再次請(qǐng)求該部分?jǐn)?shù)據(jù)時(shí)，則需要邊緣服務(wù)器重新進(jìn)行數(shù)據(jù)回源，也會(huì)對(duì)帶寬造成浪費(fèi)；再次，如果遇到同時(shí)有多個(gè)用戶請(qǐng)求回源同一個(gè)數(shù)據(jù)時(shí)，邊緣服務(wù)器會(huì)向后端的中心存儲(chǔ)器進(jìn)行多次數(shù)據(jù)回源操作，回源相同的數(shù)據(jù)，會(huì)造成效率低下和帶寬的浪費(fèi)的問題；最后，在現(xiàn)有的數(shù)據(jù)回源技術(shù)中，邊緣服務(wù)器對(duì)每個(gè)客戶端的數(shù)據(jù)請(qǐng)求按照請(qǐng)求其到達(dá)邊緣服務(wù)器的先后順序，依次進(jìn)行數(shù)據(jù)回源，而不區(qū)分每個(gè)客戶端的數(shù)據(jù)請(qǐng)求的優(yōu)先級(jí)，如果先來的請(qǐng)求是個(gè)優(yōu)先級(jí)低的請(qǐng)求，后來的請(qǐng)求是個(gè)優(yōu)先級(jí)高的請(qǐng)求，則先來的優(yōu)先級(jí)低的請(qǐng)求會(huì)搶占帶寬，影響用戶體驗(yàn)。

【發(fā)明內(nèi)容】

[0004]本發(fā)明實(shí)施例的目的在于提供一種數(shù)據(jù)回源的方法、裝置及邊緣服務(wù)器，能夠針對(duì)回源某一文件部分?jǐn)?shù)據(jù)的情況，減少數(shù)據(jù)回源對(duì)網(wǎng)絡(luò)帶寬的消耗。
[0005]為達(dá)到上述目的，本發(fā)明實(shí)施例公開了一種文件回源的方法，應(yīng)用于第一邊緣服務(wù)器，所述第一邊緣服務(wù)器與前端設(shè)備以及后端設(shè)備連接，所述前端設(shè)備為客戶端設(shè)備或第二邊緣服務(wù)器，所述后端設(shè)備為第三邊緣服務(wù)器或中心存儲(chǔ)器，其中，所述后端設(shè)備和所述第一邊緣服務(wù)器中均存儲(chǔ)有文件的分段數(shù)據(jù)，所述方法包括:
[0006]步驟S1、接收所述前端設(shè)備發(fā)送的多個(gè)下載請(qǐng)求，各個(gè)所述下載請(qǐng)求中均包含有所請(qǐng)求下載的數(shù)據(jù)所屬的目標(biāo)文件的文件標(biāo)識(shí)和所請(qǐng)求的數(shù)據(jù)區(qū)間，所述下載請(qǐng)求所請(qǐng)求下載的數(shù)據(jù)均來自同一個(gè)目標(biāo)文件；
[0007]步驟S2、對(duì)下載請(qǐng)求中的數(shù)據(jù)區(qū)間進(jìn)行合并，獲得總數(shù)據(jù)區(qū)間；
[0008]步驟S3、確定合并后可覆蓋所述總數(shù)據(jù)區(qū)間的各分段數(shù)據(jù)，將可覆蓋所述總數(shù)據(jù)區(qū)間的各分段數(shù)據(jù)確定為所需分段數(shù)據(jù)；
[0009]步驟S4、向所述后端設(shè)備獲取所述第一邊緣服務(wù)器本地未存儲(chǔ)的所需分段數(shù)據(jù)；
[0010]步驟S5、針對(duì)每一個(gè)下載請(qǐng)求，將所述所需分段數(shù)據(jù)中的該下載請(qǐng)求所請(qǐng)求下載的數(shù)據(jù)提取出，傳輸?shù)桨l(fā)送該下載請(qǐng)求的前端設(shè)備中。
[0011]較佳的，所述步驟S4，包括:
[0012]步驟S4.1、將所述總數(shù)據(jù)區(qū)間按照預(yù)設(shè)的劃分規(guī)則，劃分為多個(gè)子區(qū)間；
[0013]步驟S4.2、針對(duì)每一個(gè)子區(qū)間，判斷本地是否存儲(chǔ)有包含該子區(qū)間所對(duì)應(yīng)的數(shù)據(jù)的所需分段數(shù)據(jù)，若否，則向所述后端設(shè)備獲取所述所需分段數(shù)據(jù)。
[0014]較佳的，各個(gè)所述下載請(qǐng)求中還均包含有該下載請(qǐng)求的優(yōu)先級(jí)信息，在所述步驟S4.1之后、所述步驟S4.2之前，還包括:
[0015]步驟S4.11、根據(jù)每個(gè)下載請(qǐng)求的優(yōu)先級(jí)標(biāo)識(shí)信息，確定每個(gè)所述子區(qū)間的優(yōu)先級(jí)；
[0016]相應(yīng)的，所述步驟S4.2，包括:
[0017]按照所述子區(qū)間的優(yōu)先級(jí)從高到低的順序，依次選取每個(gè)子區(qū)間作為當(dāng)前子區(qū)間，在本地所有具有所述文件標(biāo)識(shí)的分段數(shù)據(jù)中，查找是否存在包含該當(dāng)前子區(qū)間所對(duì)應(yīng)的數(shù)據(jù)的所需分段數(shù)據(jù)，若否，則向所述后端設(shè)備獲取所述所需分段數(shù)據(jù)，并讀取所述所需分段數(shù)據(jù)，若是，則從本地直接讀取所述所需分段數(shù)據(jù)；
[0018]所述步驟S5，包括:
[0019]確定請(qǐng)求該當(dāng)前子區(qū)間內(nèi)的數(shù)據(jù)的下載請(qǐng)求，從所述讀取的所需分段數(shù)據(jù)中讀取所確定的各下載請(qǐng)求所請(qǐng)求下載的數(shù)據(jù)，將讀取的數(shù)據(jù)傳輸?shù)桨l(fā)送所確定的下載請(qǐng)求的前端設(shè)備中。
[0020]較佳的，所述步驟S4.11，包括:
[0021]對(duì)每個(gè)子區(qū)間:將請(qǐng)求該子區(qū)間對(duì)應(yīng)數(shù)據(jù)的優(yōu)先級(jí)最高的下載請(qǐng)求的優(yōu)先級(jí)，確定為該子區(qū)間的優(yōu)先級(jí)。
[0022]較佳的，在所述向所述后端設(shè)備獲取所述所需分段數(shù)據(jù)之后，還包括:
[0023]將所述獲取的所述所需分段數(shù)據(jù)保存在本地。
[0024]本發(fā)明實(shí)施例還公開了一種文件回源的裝置，應(yīng)用于第一邊緣服務(wù)器，
[0025]所述第一邊緣服務(wù)器與前端設(shè)備以及后端設(shè)備連接，所述前端設(shè)備為客戶端設(shè)備或第二邊緣服務(wù)器，所述后端設(shè)備為第三邊緣服務(wù)器或中心存儲(chǔ)器，其中，所述后端設(shè)備和所述第一邊緣服務(wù)器中均存儲(chǔ)有文件的分段數(shù)據(jù)，所述裝置包括:
[0026]下載請(qǐng)求接收模塊，用于接收所述前端設(shè)備發(fā)送的多個(gè)下載請(qǐng)求，各個(gè)所述下載請(qǐng)求中均包含有所請(qǐng)求下載的數(shù)據(jù)所屬的目標(biāo)文件的文件標(biāo)識(shí)和所請(qǐng)求的數(shù)據(jù)區(qū)間，所述下載請(qǐng)求所請(qǐng)求下載的數(shù)據(jù)均來自同一個(gè)目標(biāo)文件；
[0027]區(qū)間合并模塊，用于對(duì)下載請(qǐng)求中的數(shù)據(jù)區(qū)間進(jìn)行合并，獲得總數(shù)據(jù)區(qū)間；
[0028]所需分段數(shù)據(jù)確定模塊，用于確定合并后可覆蓋所述區(qū)間合并模塊獲得的總數(shù)據(jù)區(qū)間的各分段數(shù)據(jù)，將可覆蓋所述總數(shù)據(jù)區(qū)間的各分段數(shù)據(jù)確定為所需分段數(shù)據(jù)；
[0029]所需分段數(shù)據(jù)獲取模塊，用于向所述后端設(shè)備獲取所述第一邊緣服務(wù)器本地未存儲(chǔ)的所需分段數(shù)據(jù)；
[0030]數(shù)據(jù)發(fā)送模塊，用于針對(duì)每一個(gè)下載請(qǐng)求，將所述所需分段數(shù)據(jù)中的該下載請(qǐng)求所請(qǐng)求下載的數(shù)據(jù)提取出，傳輸?shù)桨l(fā)送該下載請(qǐng)求的前端設(shè)備中。
[0031]較佳的，所述所需分段數(shù)據(jù)獲取模塊，包括:
[0032]子區(qū)間劃分子模塊，用于將所述總數(shù)據(jù)區(qū)間按照預(yù)設(shè)的劃分規(guī)則，劃分為多個(gè)子區(qū)間；
[0033]子區(qū)間所需分段數(shù)據(jù)獲取子模塊，用于針對(duì)每一個(gè)子區(qū)間，判斷本地是否存儲(chǔ)有包含該子區(qū)間所對(duì)應(yīng)的數(shù)據(jù)的所需分段數(shù)據(jù)，若否，則向所述后端設(shè)備獲取所述所需分段數(shù)據(jù)。
[0034]較佳的，各個(gè)所述下載請(qǐng)求中還均包含有該下載請(qǐng)求的優(yōu)先級(jí)信息，所述所需分段數(shù)據(jù)獲取模塊，還包括:
[0035]子區(qū)間優(yōu)先級(jí)確定子模塊，用于根據(jù)每個(gè)下載請(qǐng)求的優(yōu)先級(jí)標(biāo)識(shí)信息，確定每個(gè)所述子區(qū)間的優(yōu)先級(jí)；
[0036]所述子區(qū)間所需分段數(shù)據(jù)獲取子模塊，具體用于按照所述子區(qū)間的優(yōu)先級(jí)從高到低的順序，依次選取每個(gè)子區(qū)間作為當(dāng)前子區(qū)間，在本地中所有具有所述文件標(biāo)識(shí)的分段數(shù)據(jù)中，查找是否存在包含該當(dāng)前子區(qū)間所對(duì)應(yīng)的數(shù)據(jù)的所需分段數(shù)據(jù)，若否，則向所述后端設(shè)備獲取所述所需分段數(shù)據(jù)，并讀取所述所需分段數(shù)據(jù)，若是，則從本地直接讀取所述所需分段數(shù)據(jù)；
[0037]所述數(shù)據(jù)發(fā)送模塊，具體用于確定請(qǐng)求該當(dāng)前子區(qū)間內(nèi)的數(shù)據(jù)的下載請(qǐng)求，從所述讀取的所需分段數(shù)據(jù)中讀取所確定的各下載請(qǐng)求所請(qǐng)求下載的數(shù)據(jù)，將讀取的數(shù)據(jù)傳輸?shù)桨l(fā)送所確定的下載請(qǐng)求的前端設(shè)備中。
[0038]較佳的，所述子區(qū)間優(yōu)先級(jí)確定模塊，具體用于對(duì)每個(gè)子區(qū)間:將請(qǐng)求該子區(qū)間對(duì)應(yīng)數(shù)據(jù)的優(yōu)先級(jí)最高的下載請(qǐng)求的優(yōu)先級(jí)，確定為該子區(qū)間的優(yōu)先級(jí)。
[0039]本發(fā)明實(shí)施例還公開了一種邊緣服務(wù)器，將所述邊緣服務(wù)器記為第一邊緣服務(wù)器，所述第一邊緣服務(wù)器與前端設(shè)備以及后端設(shè)備連接，所述前端設(shè)備為客戶端設(shè)備或第二邊緣服務(wù)器，所述后端設(shè)備為第三邊緣服務(wù)器或中心存儲(chǔ)器，其中