本發(fā)明屬于醫(yī)療數(shù)據(jù)管理，具體涉及一種醫(yī)療大數(shù)據(jù)的存儲(chǔ)與讀取優(yōu)化方法、裝置及存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、隨著醫(yī)療信息化的快速發(fā)展，醫(yī)療數(shù)據(jù)呈爆炸性增長(zhǎng)，包括但不限于患者病歷、醫(yī)學(xué)影像、生理指標(biāo)監(jiān)測(cè)數(shù)據(jù)等，這些數(shù)據(jù)對(duì)于醫(yī)學(xué)研究、臨床決策支持、健康管理以及公共衛(wèi)生監(jiān)測(cè)等方面具有極高的價(jià)值。

2、龐大的數(shù)據(jù)量對(duì)醫(yī)療數(shù)據(jù)系統(tǒng)的存儲(chǔ)、管理和利用提出了前所未有的挑戰(zhàn)，現(xiàn)有的醫(yī)療數(shù)據(jù)系統(tǒng)大多依賴于集中式服務(wù)器架構(gòu)，這種方式便于數(shù)據(jù)的集中訪問和分析，能夠使醫(yī)療機(jī)構(gòu)或研究機(jī)構(gòu)通過網(wǎng)絡(luò)將收集到的醫(yī)療數(shù)據(jù)上傳至中央服務(wù)器進(jìn)行存儲(chǔ)和管理。

3、但是，現(xiàn)有的醫(yī)療數(shù)據(jù)系統(tǒng)的服務(wù)器中往往存在著大量與其它文件相同或相近的低價(jià)值數(shù)據(jù)，造成數(shù)據(jù)冗余與存儲(chǔ)資源浪費(fèi)，而且大量數(shù)據(jù)直接上傳至服務(wù)器會(huì)極大地增加網(wǎng)絡(luò)帶寬的消耗，給網(wǎng)絡(luò)傳輸帶來較重的負(fù)擔(dān)，并導(dǎo)致數(shù)據(jù)傳輸速度緩慢，極大地影響數(shù)據(jù)上傳的及時(shí)性和效率。

技術(shù)實(shí)現(xiàn)思路

1、為了克服上述現(xiàn)有技術(shù)的缺陷，本發(fā)明提出了一種醫(yī)療大數(shù)據(jù)的存儲(chǔ)與讀取優(yōu)化方法，所述方法包括：

2、響應(yīng)于終端的第一存儲(chǔ)任務(wù)，依次獲取所述第一存儲(chǔ)任務(wù)中待匹配的醫(yī)療數(shù)據(jù)文件的標(biāo)識(shí)信息，以將所述標(biāo)識(shí)信息與所述終端本地的索引信息表進(jìn)行匹配；

3、若匹配到與所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的索引信息，獲取所述醫(yī)療數(shù)據(jù)文件的特征信息，并將所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容進(jìn)行匹配；若未匹配到與所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的索引信息，或所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度不滿足第二預(yù)設(shè)條件，完成對(duì)所述醫(yī)療數(shù)據(jù)文件的匹配；

4、若所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度滿足第二預(yù)設(shè)條件，將所述醫(yī)療數(shù)據(jù)文件從所述第一存儲(chǔ)任務(wù)中刪除；

5、在完成對(duì)所述第一存儲(chǔ)任務(wù)中所有所述醫(yī)療數(shù)據(jù)文件的匹配后，執(zhí)行所述第一存儲(chǔ)任務(wù)，并基于所述第一存儲(chǔ)任務(wù)更新所述索引信息表；

6、響應(yīng)于來自多個(gè)終端的第一存儲(chǔ)任務(wù)，使服務(wù)器接收所述第一存儲(chǔ)任務(wù)中包含的所述醫(yī)療數(shù)據(jù)文件，并在所述服務(wù)器對(duì)來自多個(gè)終端的第一存儲(chǔ)任務(wù)中所包含的冗余醫(yī)療數(shù)據(jù)文件進(jìn)行刪除。

7、進(jìn)一步地，所述方法還包括：

8、響應(yīng)于終端的第一請(qǐng)求任務(wù)，解析所述第一請(qǐng)求任務(wù)以確定第一類型信息和第一數(shù)量信息，基于所述第一類型信息對(duì)所述終端的本地?cái)?shù)據(jù)庫(kù)進(jìn)行檢索；

9、若在所述本地?cái)?shù)據(jù)庫(kù)中檢索到的醫(yī)療數(shù)據(jù)文件的數(shù)量滿足所述第一數(shù)量信息，將檢索到的所述醫(yī)療數(shù)據(jù)文件展示給用戶；

10、若在所述本地?cái)?shù)據(jù)庫(kù)中檢索到的醫(yī)療數(shù)據(jù)文件的數(shù)量不滿足所述第一數(shù)量信息，基于所述第一類型信息、所述第一數(shù)量信息和檢索到的所述醫(yī)療數(shù)據(jù)文件的數(shù)量信息生成并執(zhí)行向所述服務(wù)器的數(shù)據(jù)庫(kù)請(qǐng)求服務(wù)器文件的第二請(qǐng)求任務(wù)，使所述終端從所述服務(wù)器獲取所述服務(wù)器文件，并將所述醫(yī)療數(shù)據(jù)文件與所述服務(wù)器文件合并整理以展示給所述用戶。

11、優(yōu)選地，各終端預(yù)劃分有若干個(gè)組別，任一組別均包括至少兩個(gè)終端，且任一終端最多從屬于一個(gè)組別；所述方法還包括：

12、在完成對(duì)所述第一存儲(chǔ)任務(wù)中所有所述醫(yī)療數(shù)據(jù)文件的匹配后，生成將所述第一存儲(chǔ)任務(wù)中包含的醫(yī)療數(shù)據(jù)文件存儲(chǔ)至終端本地?cái)?shù)據(jù)庫(kù)的第二存儲(chǔ)任務(wù)；

13、獲取所述終端的本地?cái)?shù)據(jù)庫(kù)已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量；

14、若已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量未超過第一預(yù)設(shè)容量值，在所述終端執(zhí)行所述第二存儲(chǔ)任務(wù)；

15、若已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量超過第一預(yù)設(shè)容量值，在與所述終端從屬于同一組別的一其它終端執(zhí)行所述第二存儲(chǔ)任務(wù)，以在響應(yīng)于任一終端的所述第一請(qǐng)求任務(wù)時(shí)，通過所述第一類型信息對(duì)與所述終端從屬于同一組別的所有終端的本地?cái)?shù)據(jù)庫(kù)進(jìn)行檢索。

16、進(jìn)一步地，所述方法還包括：

17、執(zhí)行所述第二存儲(chǔ)任務(wù)后，獲取所述終端的本地?cái)?shù)據(jù)庫(kù)已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量；

18、若已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量超過第二預(yù)設(shè)容量值，獲取所述本地?cái)?shù)據(jù)庫(kù)中的所有所述醫(yī)療數(shù)據(jù)文件的標(biāo)識(shí)信息，基于所述標(biāo)識(shí)信息將所有所述醫(yī)療數(shù)據(jù)文件劃分為若干個(gè)類別；

19、基于同一類別中所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的至少兩個(gè)所述醫(yī)療數(shù)據(jù)文件生成相似文件組，分別對(duì)各所述相似文件組中各所述醫(yī)療數(shù)據(jù)文件的特征信息進(jìn)行比對(duì)，并將存在至少一組特征信息的匹配度滿足第二預(yù)設(shè)條件的醫(yī)療數(shù)據(jù)文件的所述相似文件組展示給用戶，以提示所述用戶進(jìn)行相應(yīng)刪除。

20、優(yōu)選地，所述方法還包括：

21、在提示所述用戶進(jìn)行相應(yīng)刪除后，獲取所述用戶分別對(duì)各所述類別的所述相似文件組中所述醫(yī)療數(shù)據(jù)文件進(jìn)行刪除與否的決策信息，并將所述決策信息作為深度學(xué)習(xí)模型的訓(xùn)練樣本；

22、利用完成訓(xùn)練的所述深度學(xué)習(xí)模型更新所述第二預(yù)設(shè)條件，以在基于同一類別中所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的至少兩個(gè)所述醫(yī)療數(shù)據(jù)文件生成相似文件組后，以基于更新后的所述第二預(yù)設(shè)條件執(zhí)行“分別對(duì)各所述相似文件組中各所述醫(yī)療數(shù)據(jù)文件的特征信息進(jìn)行比對(duì)”的步驟。

23、相應(yīng)地，所述“若匹配到與所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的索引信息，獲取所述醫(yī)療數(shù)據(jù)文件的特征信息，并將所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容進(jìn)行匹配”，包括：

24、若匹配到與所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的索引信息，確定所述醫(yī)療數(shù)據(jù)文件從屬的類別并獲取所述醫(yī)療數(shù)據(jù)文件的特征信息，以基于更新后的所述第二預(yù)設(shè)條件將所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容進(jìn)行匹配。

25、進(jìn)一步地，所述方法還包括：

26、若已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量超過第三預(yù)設(shè)容量值，獲取所述本地?cái)?shù)據(jù)庫(kù)中各所述醫(yī)療數(shù)據(jù)文件的存儲(chǔ)時(shí)間，基于所述存儲(chǔ)時(shí)間依次刪除醫(yī)療數(shù)據(jù)文件，直至已存儲(chǔ)的所述醫(yī)療數(shù)據(jù)文件所占用的空間容量不超過第四預(yù)設(shè)容量值；所述第三預(yù)設(shè)容量值不小于所述第二預(yù)設(shè)容量值、所述第四預(yù)設(shè)容量值。

27、優(yōu)選地，各所述特征信息分別對(duì)應(yīng)所述醫(yī)療數(shù)據(jù)文件中的不同的內(nèi)容部分，所述“若所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度滿足第二預(yù)設(shè)條件，將所述醫(yī)療數(shù)據(jù)文件從所述第一存儲(chǔ)任務(wù)中刪除”，包括：

28、若與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度滿足第三預(yù)設(shè)條件的特征信息在所有特征信息中的占比不低于預(yù)設(shè)比例值，確定所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度滿足第二預(yù)設(shè)條件，將所述醫(yī)療數(shù)據(jù)文件從所述第一存儲(chǔ)任務(wù)中刪除；

29、基于與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度不滿足第三預(yù)設(shè)條件的特征信息所對(duì)應(yīng)的內(nèi)容部分生成更新文件，以將所述更新文件添加至所述第一存儲(chǔ)任務(wù)。

30、本發(fā)明還提出了一種醫(yī)療大數(shù)據(jù)的存儲(chǔ)與讀取優(yōu)化裝置，所述裝置包括：

31、響應(yīng)模塊，用于響應(yīng)于終端的第一存儲(chǔ)任務(wù)，依次獲取所述第一存儲(chǔ)任務(wù)中待匹配的醫(yī)療數(shù)據(jù)文件的標(biāo)識(shí)信息，以將所述標(biāo)識(shí)信息與所述終端本地的索引信息表進(jìn)行匹配；

32、匹配模塊，用于當(dāng)匹配到與所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的索引信息時(shí)，獲取所述醫(yī)療數(shù)據(jù)文件的特征信息，并將所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容進(jìn)行匹配；若未匹配到與所述標(biāo)識(shí)信息的匹配度滿足第一預(yù)設(shè)條件的索引信息，或所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度不滿足第二預(yù)設(shè)條件，完成對(duì)所述醫(yī)療數(shù)據(jù)文件的匹配；

33、刪除模塊，用于當(dāng)所述特征信息與所述索引信息對(duì)應(yīng)的具體內(nèi)容的匹配度滿足第二預(yù)設(shè)條件時(shí)，將所述醫(yī)療數(shù)據(jù)文件從所述第一存儲(chǔ)任務(wù)中刪除；

34、執(zhí)行模塊，用于在完成對(duì)所述第一存儲(chǔ)任務(wù)中所有所述醫(yī)療數(shù)據(jù)文件的匹配后，執(zhí)行所述第一存儲(chǔ)任務(wù)，并基于所述第一存儲(chǔ)任務(wù)更新所述索引信息表；

35、處理模塊，用于響應(yīng)于來自多個(gè)終端的第一存儲(chǔ)任務(wù)，使服務(wù)器接收所述第一存儲(chǔ)任務(wù)中包含的所述醫(yī)療數(shù)據(jù)文件，并在所述服務(wù)器對(duì)來自多個(gè)終端的第一存儲(chǔ)任務(wù)中所包含的冗余醫(yī)療數(shù)據(jù)文件進(jìn)行刪除。

36、本發(fā)明還提出了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，該可讀存儲(chǔ)介質(zhì)存儲(chǔ)有可執(zhí)行指令，用于被處理器執(zhí)行時(shí)，實(shí)現(xiàn)如前文所述的醫(yī)療大數(shù)據(jù)的存儲(chǔ)與讀取優(yōu)化方法。

37、本發(fā)明至少具有以下有益效果：

38、本發(fā)明提出的方案通過在上傳前對(duì)醫(yī)療數(shù)據(jù)文件進(jìn)行特征匹配和內(nèi)容匹配，可以有效識(shí)別出與服務(wù)器上已存文件相似度極高的新文件并取消上傳，從而避免了低價(jià)值數(shù)據(jù)的上傳和存儲(chǔ)，對(duì)于海量醫(yī)療數(shù)據(jù)的存儲(chǔ)管理尤為重要，可以顯著減少存儲(chǔ)空間的浪費(fèi)，降低存儲(chǔ)成本，與服務(wù)器端的冗余數(shù)據(jù)清除有效結(jié)合，有助于服務(wù)器資源的合理分配和利用，同時(shí)減少了人工干預(yù)的需要，提高了數(shù)據(jù)管理的效率和準(zhǔn)確性，為醫(yī)療大數(shù)據(jù)的存儲(chǔ)和管理提供了一種更為高效、安全、經(jīng)濟(jì)的解決方案；

39、進(jìn)一步地，本方案通過優(yōu)先在本地?cái)?shù)據(jù)庫(kù)檢索數(shù)據(jù)，可以顯著提高數(shù)據(jù)訪問速度，減少網(wǎng)絡(luò)延遲和帶寬消耗，當(dāng)本地?cái)?shù)據(jù)庫(kù)中存在足夠數(shù)量數(shù)據(jù)時(shí)，用戶可以立即獲取而無需等待服務(wù)器響應(yīng)，并可以在數(shù)據(jù)數(shù)量不足時(shí)結(jié)合服務(wù)器文件滿足用戶需求，通過終端分組和數(shù)據(jù)共享，可以有效利用組內(nèi)終端的存儲(chǔ)空間，避免單一終端存儲(chǔ)空間不足的問題，當(dāng)某終端存儲(chǔ)空間接近預(yù)設(shè)上限時(shí)，可以將數(shù)據(jù)遷移至同組其他終端，既保證了數(shù)據(jù)的可用性，又提高了存儲(chǔ)效率，同時(shí)在響應(yīng)下載請(qǐng)求時(shí)也可以在更廣泛的范圍內(nèi)檢索數(shù)據(jù)，提高了數(shù)據(jù)檢索的成功率；

40、優(yōu)選地，本方案還能夠通過對(duì)文件分類生成相似文件組以幫助用戶快速識(shí)別并清理終端本地的冗余數(shù)據(jù)，從而智能管理本地?cái)?shù)據(jù)庫(kù)空間，避免存儲(chǔ)空間浪費(fèi)，并在此基礎(chǔ)上利用深度學(xué)習(xí)模型動(dòng)態(tài)調(diào)整各類型文件所應(yīng)用的比例值，可以更加精準(zhǔn)地識(shí)別各類型的相似文件，提高特征信息比對(duì)的準(zhǔn)確性，使系統(tǒng)能夠更好地適應(yīng)不同類別的醫(yī)療數(shù)據(jù)文件，提高了系統(tǒng)的智能化水平和自適應(yīng)能力；

41、此外，本方案通過將分別對(duì)各個(gè)特征信息進(jìn)行匹配，可以更細(xì)致地識(shí)別醫(yī)療數(shù)據(jù)文件與索引信息的差異，當(dāng)存在部分匹配時(shí)，可以僅上傳基于不匹配的特征信息生成的更新文件而非整個(gè)文件，可以顯著減少數(shù)據(jù)傳輸量，提高上傳效率，也保證了數(shù)據(jù)的完整性和一致性，避免了數(shù)據(jù)重復(fù)和冗余；當(dāng)本地?cái)?shù)據(jù)庫(kù)存儲(chǔ)空間極度緊張時(shí)，通過基于存儲(chǔ)時(shí)間的刪除策略，可以優(yōu)先刪除較舊的數(shù)據(jù)文件，為新的數(shù)據(jù)文件騰出空間，保證了數(shù)據(jù)的時(shí)效性。

42、以此，本發(fā)明提供了一種醫(yī)療大數(shù)據(jù)的存儲(chǔ)與讀取優(yōu)化方法、裝置及存儲(chǔ)介質(zhì)，本發(fā)明提出的方案通過在上傳前對(duì)存儲(chǔ)任務(wù)中的醫(yī)療數(shù)據(jù)文件進(jìn)行標(biāo)識(shí)信息和特征信息的雙重匹配，能夠有效避免低價(jià)值數(shù)據(jù)的上傳，減輕了網(wǎng)絡(luò)傳輸?shù)呢?fù)擔(dān)和服務(wù)器的處理負(fù)載，同時(shí)結(jié)合服務(wù)端的冗余文件刪除，有效防止了服務(wù)器存儲(chǔ)空間的浪費(fèi)，具有提升數(shù)據(jù)管理效率、優(yōu)化存儲(chǔ)空間利用的效果。