本發(fā)明涉及到服務器技術(shù)領(lǐng)域，特別是一種高效數(shù)據(jù)處理服務器系統(tǒng)。

背景技術(shù)：

在服務器數(shù)據(jù)處理領(lǐng)域，目前都是通過單個或者多個服務器進行同時處理，通過單個服務器處理時單個服務器的處理能力有限，多個服務器時容易造成服務器資源的浪費，這一問題一直沒有得到合理解決。目前都是通過人工監(jiān)控來進行數(shù)據(jù)處理。

技術(shù)實現(xiàn)要素：

1、為解決上述技術(shù)問題，本發(fā)明提供了一種高效數(shù)據(jù)處理服務器系統(tǒng)，其特征在于，包括數(shù)據(jù)源服務器、第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器、備用數(shù)據(jù)處理服務器以及任務分配服務器，所述任務分配服務器接收所述數(shù)據(jù)源服務器的數(shù)據(jù)輸入，所述任務分配服務器用于向所述第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器、備用數(shù)據(jù)處理服務器提供待處理的源數(shù)據(jù)；

所述數(shù)據(jù)源服務器通過特定的數(shù)據(jù)接口根據(jù)數(shù)據(jù)類型、關(guān)鍵詞信息獲取源數(shù)據(jù)；并對源數(shù)據(jù)進行預處理，所述數(shù)據(jù)預處理服務器的預處理操作為對缺損數(shù)據(jù)進行修復，刪除無用數(shù)據(jù)；所述缺損數(shù)據(jù)為與數(shù)據(jù)類型庫中數(shù)據(jù)后綴名稱近似度超過設定閾值的數(shù)據(jù)，修復缺損數(shù)據(jù)的方式為根據(jù)數(shù)據(jù)類型庫中的具體數(shù)據(jù)后綴作為所述缺損數(shù)據(jù)的后綴替換掉原有的數(shù)據(jù)后綴；所述無用數(shù)據(jù)為與數(shù)據(jù)類型庫中數(shù)據(jù)后綴名稱近似度低于設定閾值的數(shù)據(jù)；其中數(shù)據(jù)類型的近似度根據(jù)數(shù)據(jù)的后綴名稱的字符的數(shù)量進行量化；

所述任務分配服務器接收外界發(fā)送的數(shù)據(jù)，所述任務分配服務器篩選出特定的兩種類型的數(shù)據(jù)并按照數(shù)據(jù)類別分別發(fā)送至第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器，所述第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器分別處理一種類型的數(shù)據(jù)；所述備用數(shù)據(jù)處理服務器可以處理所述兩種類型的數(shù)據(jù)中的任意一種；

所述第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器將實時的數(shù)據(jù)處理進度發(fā)送至所述任務分配服務器，所述第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器至少連續(xù)工作48小時，所述任務分配服務器以24小時為一個周期以1小時為記錄頻率記錄第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器的數(shù)據(jù)處理進度，所述任務分配服務器記錄至少兩個周期內(nèi)第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器的數(shù)據(jù)處理進度，并對比兩個周期內(nèi)第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器在相同的記錄時間點的處理進度，若兩個周期內(nèi)在同一個記錄時間點第一數(shù)據(jù)處理服務器都高于第二數(shù)據(jù)處理服務器的處理進度，在下一個周期內(nèi)在該數(shù)據(jù)記錄點所述第二數(shù)據(jù)處理服務器將接收到的數(shù)據(jù)發(fā)送一半至所述備用數(shù)據(jù)處理服務器，若兩個周期內(nèi)在同一個記錄時間點第二數(shù)據(jù)處理服務器都高于第一數(shù)據(jù)處理服務器的處理進度，在下一個周期內(nèi)該時間記錄點所述第一數(shù)據(jù)處理服務器將接收到的數(shù)據(jù)發(fā)送一半至所述備用數(shù)據(jù)處理服務器。

較佳地，所述特定的兩種類型的數(shù)據(jù)根據(jù)需要進行設定。

較佳地，所述特定的數(shù)據(jù)接口包括網(wǎng)絡數(shù)據(jù)庫、數(shù)據(jù)搜索引擎。

較佳地，在所述第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器連續(xù)工作時間未滿48小時內(nèi)，當所述第一數(shù)據(jù)處理服務器、第二數(shù)據(jù)處理服務器中的一個的數(shù)據(jù)處理進度低于30％時，該數(shù)據(jù)處理進度低于30％的服務器將接受到的數(shù)據(jù)的一半發(fā)送至所述備用數(shù)據(jù)處理服務器。

本發(fā)明具有以下有益效果：

本發(fā)明提供的高效數(shù)據(jù)處理服務器系統(tǒng)根據(jù)兩個數(shù)據(jù)處理服務器的歷史數(shù)據(jù)處理狀態(tài)通過備用服務器進行輔助處理，保證了數(shù)據(jù)處理的高效性；同時本發(fā)明可以在獲取歷史數(shù)據(jù)處理狀態(tài)的時間內(nèi)通過備用數(shù)據(jù)處理器保證數(shù)據(jù)處理不收影響。

當然，實施本發(fā)明的任一產(chǎn)品并不一定需要同時達到以上所述的所有優(yōu)點。

附圖說明

為了更清楚地說明本發(fā)明實施例的技術(shù)方案，下面將對實施例描述所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。

圖1為本發(fā)明實施例提供的高效數(shù)據(jù)處理服務器系統(tǒng)示意圖。

具體實施方式

下面將結(jié)合本發(fā)明實施例中的附圖，對本發(fā)明實施例中的技術(shù)方案進行清楚、完整地描述，顯然，所描述的實施例僅僅是本發(fā)明一部分實施例，而不是全部的實施例?；诒景l(fā)明中的實施例，本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動前提下所獲得的所有其它實施例，都屬于本發(fā)明保護的范圍。

本發(fā)明實施例提供了一種高效數(shù)據(jù)處理服務器系統(tǒng)，其包括數(shù)據(jù)源服務器1、第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4、備用數(shù)據(jù)處理服務器5以及任務分配服務器2，所述任務分配服務器2接收所述數(shù)據(jù)源服務器1的數(shù)據(jù)輸入，所述任務分配服務器2用于向所述第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4、備用數(shù)據(jù)處理服務器5提供待處理的源數(shù)據(jù)；

所述數(shù)據(jù)源服務器1通過特定的數(shù)據(jù)接口根據(jù)數(shù)據(jù)類型、關(guān)鍵詞信息獲取源數(shù)據(jù)；并對源數(shù)據(jù)進行預處理，所述數(shù)據(jù)預處理服務器的預處理操作為對缺損數(shù)據(jù)進行修復，刪除無用數(shù)據(jù)；所述缺損數(shù)據(jù)為與數(shù)據(jù)類型庫中數(shù)據(jù)后綴名稱近似度超過設定閾值的數(shù)據(jù)，修復缺損數(shù)據(jù)的方式為根據(jù)數(shù)據(jù)類型庫中的具體數(shù)據(jù)后綴作為所述缺損數(shù)據(jù)的后綴替換掉原有的數(shù)據(jù)后綴；所述無用數(shù)據(jù)為與數(shù)據(jù)類型庫中數(shù)據(jù)后綴名稱近似度低于設定閾值的數(shù)據(jù)；其中數(shù)據(jù)類型的近似度根據(jù)數(shù)據(jù)的后綴名稱的字符的數(shù)量進行量化；

所述任務分配服務器2接收外界發(fā)送的數(shù)據(jù)，所述任務分配服務器2篩選出特定的兩種類型的數(shù)據(jù)并按照數(shù)據(jù)類別分別發(fā)送至第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4，所述第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4分別處理一種類型的數(shù)據(jù)；所述備用數(shù)據(jù)處理服務器5可以處理所述兩種類型的數(shù)據(jù)中的任意一種；

所述第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4將實時的數(shù)據(jù)處理進度發(fā)送至所述任務分配服務器2，所述第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4至少連續(xù)工作48小時，所述任務分配服務器2以24小時為一個周期以1小時為記錄頻率記錄第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4的數(shù)據(jù)處理進度，所述任務分配服務器2記錄至少兩個周期內(nèi)第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4的數(shù)據(jù)處理進度，并對比兩個周期內(nèi)第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4在相同的記錄時間點的處理進度，若兩個周期內(nèi)在同一個記錄時間點第一數(shù)據(jù)處理服務器3都高于第二數(shù)據(jù)處理服務器4的處理進度，在下一個周期內(nèi)在該數(shù)據(jù)記錄點所述第二數(shù)據(jù)處理服務器4將接收到的數(shù)據(jù)發(fā)送一半至所述備用數(shù)據(jù)處理服務器5，若兩個周期內(nèi)在同一個記錄時間點第二數(shù)據(jù)處理服務器4都高于第一數(shù)據(jù)處理服務器3的處理進度，在下一個周期內(nèi)該時間記錄點所述第一數(shù)據(jù)處理服務器3將接收到的數(shù)據(jù)發(fā)送一半至所述備用數(shù)據(jù)處理服務器5。

本實施例所述特定的兩種類型的數(shù)據(jù)根據(jù)需要進行設定。兩種數(shù)據(jù)類型可以設置為特定格式的文檔數(shù)據(jù)、特定格式的圖片數(shù)據(jù)，特定格式的視頻數(shù)據(jù)，音頻文件，或者其他類型的數(shù)據(jù)，如doc后綴的文件，jpg后綴的文件，mp4后綴的文件，mp3后綴的文件等，本發(fā)明不做具體限定。

所述特定的數(shù)據(jù)接口包括網(wǎng)絡數(shù)據(jù)庫、數(shù)據(jù)搜索引擎。

在所述第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4連續(xù)工作時間未滿48小時內(nèi)，當所述第一數(shù)據(jù)處理服務器3、第二數(shù)據(jù)處理服務器4中的一個的數(shù)據(jù)處理進度低于30％時，該數(shù)據(jù)處理進度低于30％的服務器將接受到的數(shù)據(jù)的一半發(fā)送至所述備用數(shù)據(jù)處理服務器。

本發(fā)明提供的高效數(shù)據(jù)處理服務器系統(tǒng)根據(jù)兩個數(shù)據(jù)處理服務器的歷史數(shù)據(jù)處理狀態(tài)通過備用服務器進行輔助處理，保證了數(shù)據(jù)處理的高效性；同時本發(fā)明可以在獲取歷史數(shù)據(jù)處理狀態(tài)的時間內(nèi)通過備用數(shù)據(jù)處理器保證數(shù)據(jù)處理不收影響。

以上公開的本發(fā)明優(yōu)選實施例只是用于幫助闡述本發(fā)明。優(yōu)選實施例并沒有詳盡敘述所有的細節(jié)，也不限制該發(fā)明僅為所述的具體實施方式。顯然，根據(jù)本說明書的內(nèi)容，可作很多的修改和變化。本說明書選取并具體描述這些實施例，是為了更好地解釋本發(fā)明的原理和實際應用，從而使所屬技術(shù)領(lǐng)域技術(shù)人員能很好地理解和利用本發(fā)明。本發(fā)明僅受權(quán)利要求書及其全部范圍和等效物的限制。