欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

一種計算機顯示快速更新報價信息的方法

文檔序號:6602736閱讀:209來源:國知局
專利名稱:一種計算機顯示快速更新報價信息的方法
一種計算機顯示快速更新報價信息的方法本發(fā)明涉及計算機程序技術(shù)領(lǐng)域,具體的說是一種計算機顯示快速更新報價信息 的方法。目前,越來越多的企業(yè)都在互聯(lián)網(wǎng)上創(chuàng)建了自己的產(chǎn)品直銷網(wǎng)站,以產(chǎn)品種類齊 全,價格實惠而受到廣大網(wǎng)民的鐘愛,面對浩瀚如煙的商品信息,許多人往往無所適從,那 么用何種方法來快速、有效地選擇互聯(lián)網(wǎng)上性價比最優(yōu)的商品呢?本發(fā)明的目的在于克服現(xiàn)有技術(shù)的不足,提供一種快速有效地價格發(fā)現(xiàn)、更新機 制,讓系統(tǒng)能夠及時更新到互聯(lián)網(wǎng)上不同商家的商品最新價格信息,包括降價比較、庫存狀 態(tài)以及商品相關(guān)買賣信息。在此基礎(chǔ)上再通過內(nèi)容發(fā)布,郵件訂閱、搜索比較等方式來告訴 相應(yīng)的關(guān)注群體。為實現(xiàn)上述目的,設(shè)計一種計算機顯示快速更新報價信息的方法,其特征在于該 方法用以采集商品報價頁數(shù)據(jù)要求,并依據(jù)該要求產(chǎn)生分析商品報價頁面數(shù)據(jù),該方法包 括a.采集商品報價頁數(shù)據(jù)要求其界定該要求所對應(yīng)的商家網(wǎng)站上的報價頁數(shù)據(jù)的 采集規(guī)則,發(fā)送到服務(wù)器的服務(wù)端;b.加載與該要求對應(yīng)的第三方商品報價頁數(shù)據(jù)采集,并接收對應(yīng)于該商品報價頁 的數(shù)據(jù)而定的商品采集庫,發(fā)送到服務(wù)器的服務(wù)端;c.所述的服務(wù)器根據(jù)上述數(shù)據(jù)信息發(fā)送給客戶端,所述的客戶端上設(shè)有任務(wù)調(diào)度 器啟東,接收對應(yīng)于該要求的回復(fù)數(shù)據(jù);d.依據(jù)商家網(wǎng)站上的報價頁數(shù)據(jù)及第三方商品報價頁數(shù)據(jù),產(chǎn)生分析商品報價頁 面數(shù)據(jù),建立價格變動數(shù)據(jù)、報價表數(shù)據(jù)、降價表數(shù)據(jù)及報價歷史表數(shù)據(jù)的數(shù)據(jù)分析入庫。所述的采集規(guī)則采集的數(shù)據(jù)為商品名稱、企業(yè)名稱、企業(yè)地址、價格、庫存狀態(tài)的 信息,采集規(guī)則上設(shè)有更新機制,將代碼特征輸入到更新規(guī)則的數(shù)據(jù)庫中。所述的服務(wù)器的服務(wù)端負責(zé)商品數(shù)據(jù)、采集規(guī)則數(shù)據(jù)源提供,每個商家的商品數(shù) 據(jù)由第三方程序采集后寫入數(shù)據(jù)庫,數(shù)據(jù)信息包括商家編號、商品編號、商品URI、分類、標 題、價格、是否更新、商品介紹、更新時用數(shù)據(jù)信息。所述的客戶端根據(jù)調(diào)度器啟動客戶端,啟動多線程機制分別向服務(wù)端請求商品信 息,并且根據(jù)商品URL請求到實時的商品頁面內(nèi)容;所述的系統(tǒng)調(diào)度器根據(jù)需要更新的商 家數(shù)量和更新頻率平均分配調(diào)度時間點,安排每個客戶端的啟動時間,客戶端啟動的進程 數(shù)量可以通過配置文件進行設(shè)置??蛻舳撕头?wù)端之間基于二進制遠程傳輸協(xié)議實現(xiàn)數(shù)據(jù) 通信,當(dāng)商家的客戶端被啟動時,會創(chuàng)建若干個線程同時向服務(wù)端請求商品信息,這時服務(wù) 端從商品采集庫中讀取商家商品數(shù)據(jù)分別傳送給客戶端,客戶端一個進程即可以完成一次完整的數(shù)據(jù)請求工作,若干個進程同時啟動就實現(xiàn)了多任務(wù)并發(fā)執(zhí)行數(shù)據(jù)更新,如果再開 啟一個客戶端,那么又可以創(chuàng)建若干個進程來完成下一批商品數(shù)據(jù)的更新工作,這樣的客 戶端可以由調(diào)度器來決定啟動次數(shù)和調(diào)用的頻率。所述數(shù)據(jù)分析入庫對采集后的數(shù)據(jù)需要進行規(guī)范化處理,分析商品的價格和異常 數(shù)據(jù)處理,所述的商品價格解析進程取到服務(wù)端返回的商品數(shù)據(jù)集合后,會循環(huán)讀取出商 品的URL地址向網(wǎng)站請求商品頁面內(nèi)容,同時讀取采集規(guī)則設(shè)置的參數(shù)信息分析出本次請 求的商品價格內(nèi)容,然后與本地價格比較,如果發(fā)現(xiàn)商品價格不相同,則向產(chǎn)品降價表寫入 一條數(shù)據(jù),同時也更新采集數(shù)據(jù)庫中的價格和更新時間信息。針對降價表內(nèi)的數(shù)據(jù),會根據(jù) 用戶訂閱的內(nèi)容,讀取出當(dāng)天最新降價的商品向客戶發(fā)送降價商品信息,所述的異數(shù)據(jù)常 處理在向商家站點請求商品數(shù)據(jù)過程中可能會因為網(wǎng)絡(luò)連接、服務(wù)器關(guān)閉、商品下架等諸 多因素,針對此類情況,客戶端對各類異常進行捕獲,對不同的異常情況建立不同的狀態(tài)碼 進行標識,寫入采集數(shù)據(jù)庫表中,做為下次數(shù)據(jù)請求或者后期數(shù)據(jù)處理時參考使用。本發(fā)明與現(xiàn)有技術(shù)相比,實現(xiàn)自動化處理,程序根據(jù)設(shè)置好的參數(shù)和調(diào)度頻率,自 動執(zhí)行報價更新、分析、入庫,整個過程不需要人工干預(yù);高效率執(zhí)行,多個商家,不同商品 報價可啟動多任務(wù)更新執(zhí)行,從而大量地縮短了更新周期,讓用戶在最短時間內(nèi)就能比較 發(fā)現(xiàn)互聯(lián)網(wǎng)上不同商家的同類商品比較信息;容錯性強,對更新商品價格信息過程中出現(xiàn) 的異常處理,包括了網(wǎng)站訪問異常、商品報價頁無效、商品無貨下架等,使商品信息在數(shù)據(jù) 庫中保持良好的有效性和正確性;智能數(shù)據(jù)處理,采集后的數(shù)據(jù)自動分析價格漲跌,分別進 入商品降價表和報價信息表,為頁面展示商品價格歷史提供數(shù)據(jù)。

圖1為本發(fā)明的流程示意圖; [具體實施方式
]下面結(jié)合附圖對本發(fā)明作進一步說明。本發(fā)明包括以下部分內(nèi)容組成⑴采集規(guī)則;⑵內(nèi)容更新;⑶數(shù)據(jù)分析入庫。(1)采集規(guī)則通過對目標商家網(wǎng)站的采集分析,設(shè)定相應(yīng)的商品地址、價格、庫存狀態(tài)等必須的
參數(shù)信息。例如從IE瀏覽器中的地址欄輸入一個圖書類的商品URL地址“http:// product, dangdang. com/product, aspx ? product id = 8765156,,,在打開白勺商品頁上,ffl 過鼠標右鍵“查看源文件”功能,我們可以得到該頁的HTML源代碼信息,定位標題、作者、出 版社、ISBN、價格等代碼特征,將這些特征參數(shù)輸入到更新規(guī)則的數(shù)據(jù)庫中。這些參數(shù)代表 了該商家商品發(fā)布頁面的基本框架模型,后期的更新程序可以根據(jù)本次已經(jīng)設(shè)定好的參數(shù) 進行價格等信息的定位。采集規(guī)則更新機制隨著商家業(yè)務(wù)的發(fā)展,很有可能在不久的將來會對網(wǎng)站進行 改版,那時,我們設(shè)置的采集規(guī)則就會隨著網(wǎng)站的改版而失效。系統(tǒng)根據(jù)采集反饋回來的失 敗信息進行統(tǒng)計,當(dāng)失敗數(shù)量達到預(yù)設(shè)的閥門值時,系統(tǒng)會認為該規(guī)則已失效,從而發(fā)送郵 件通知管理人員對網(wǎng)站采集規(guī)則進行修正。
4
(2)內(nèi)容更新報價內(nèi)容的更新機制分為服務(wù)端和客戶端兩大部分組成。服務(wù)端負責(zé)商品數(shù)據(jù)、采集規(guī)則數(shù)據(jù)源的提供。每個商家的商品數(shù)據(jù)由第三程序 采集后寫入數(shù)據(jù)庫,信息包括商家編號、商品編號、商品URL、分類、標題、價格、是否更新、商 品介紹、更新時間等信息??蛻舳烁鶕?jù)調(diào)度器啟動客戶端,啟動多線程機制分別向服務(wù)端請求商品信息,并 且根據(jù)商品URL請求到實時的商品頁面內(nèi)容。系統(tǒng)調(diào)度器根據(jù)需要更新的商家數(shù)量和更新頻率平均分配調(diào)度時間點,安排每個 客戶端的啟動時間,客戶端啟動的進程數(shù)量可以通過配置文件進行設(shè)置。客戶端和服務(wù)端 之間基于二進制遠程傳輸協(xié)議實現(xiàn)數(shù)據(jù)通信,當(dāng)某個商家的客戶端被啟動時,會創(chuàng)建若干 個線程同時向服務(wù)端請求商品信息,這時服務(wù)端從商品采集庫中讀取商家商品數(shù)據(jù)分別傳 送給客戶端??蛻舳艘粋€進程即可以完成一次完整的數(shù)據(jù)請求工作,若干個進程同時啟動就實 現(xiàn)了多任務(wù)并發(fā)執(zhí)行數(shù)據(jù)更新。如果再開啟一個客戶端,那么又可以創(chuàng)建若干個進程來完 成下一批商品數(shù)據(jù)的更新工作,這樣的客戶端可以由調(diào)度器來決定啟動次數(shù)和調(diào)用的頻率。(3)數(shù)據(jù)分析入庫對采集后的數(shù)據(jù)需要進行規(guī)范化處理,分析商品的價格和異常數(shù)據(jù)處理。價格解析進程取到服務(wù)端返回的商品數(shù)據(jù)集合后,會循環(huán)讀取出商品的URL地 址向網(wǎng)站請求商品頁面內(nèi)容,同時讀取采集規(guī)則設(shè)置的參數(shù)信息分析出本次請求的商品價 格內(nèi)容,然后與本地價格比較。如果發(fā)現(xiàn)商品價格不相同,則向產(chǎn)品降價表寫入一條數(shù)據(jù), 同時也更新采集數(shù)據(jù)庫中的價格和更新時間信息。針對降價表內(nèi)的數(shù)據(jù),會根據(jù)用戶訂閱 的內(nèi)容,讀取出當(dāng)天最新降價的商品向客戶發(fā)送降價商品信息。異常處理在向商家站點請求商品數(shù)據(jù)過程中可能會因為網(wǎng)絡(luò)連接、服務(wù)器關(guān)閉、 商品下架等諸多因素,針對此類情況,客戶端對各類異常進行捕獲,對不同的異常情況建立 不同的狀態(tài)碼進行標識,寫入采集數(shù)據(jù)庫表中,做為下次數(shù)據(jù)請求或者后期數(shù)據(jù)處理時參 考使用。例1 商家網(wǎng)址:http://www. dangdang. com商品URL:http://product, dangdang. com/product, aspx ? product—id = 20032382&ref = search-l-A 當(dāng)當(dāng)價Y16. 60處理流程參數(shù)設(shè)置在IE瀏覽器中的地址欄輸入商品URL,瀏覽器會顯示該商品相關(guān)信息。 在打開的商品頁上,通過鼠標右鍵“查看源文件”功能,我們可以得到該頁的HTML代碼。定 位出“當(dāng)當(dāng)價”的起始標志是“〈spanclass = “ redc30 “ >當(dāng)當(dāng)價Y<b>,,結(jié)束標志是 “〈/bX/span〉”,將這些起始和結(jié)束的標志參數(shù)輸入到數(shù)據(jù)庫中,做為報價更新程序解析頁 面內(nèi)容時的依據(jù)。報價更新客戶端的一個商家報價更新任務(wù)被調(diào)度器啟動后,會創(chuàng)建10個線程向
5服務(wù)端請求該商家的商品舊報價數(shù)據(jù),包括了商品ID、商品URL、價格等信息。假設(shè)其中一 個客戶端線程從服務(wù)端讀取到一批需要更新的商品數(shù)據(jù)包含了該條商品,那么客戶端程序 就會先讀取出該商品的URL地址,通過HttpRequest請求商家的商品頁面內(nèi)容,接著客戶端 程序又從服務(wù)器請求該商家的商品報價參數(shù),來解析出最新的價格并與舊價格進行比較, 如果價格發(fā)生變動,則會創(chuàng)建一條SQL語句寫入文本文件,后續(xù)程序?qū)⑦\行SQL語句將價格 變動信息寫入降價表內(nèi),供前臺門戶網(wǎng)站展示使用。
權(quán)利要求
一種計算機顯示快速更新報價信息的方法,其特征在于該方法用以采集商品報價頁數(shù)據(jù)要求,并依據(jù)該要求產(chǎn)生分析商品報價頁面數(shù)據(jù),該方法包括a.采集商品報價頁數(shù)據(jù)要求其界定該要求所對應(yīng)的商家網(wǎng)站上的報價頁數(shù)據(jù)的采集規(guī)則,發(fā)送到服務(wù)器的服務(wù)端;b.加載與該要求對應(yīng)的第三方商品報價頁數(shù)據(jù)采集,并接收對應(yīng)于該商品報價頁的數(shù)據(jù)而定的商品采集庫,發(fā)送到服務(wù)器的服務(wù)端;c.所述的服務(wù)器根據(jù)上述數(shù)據(jù)信息發(fā)送給客戶端,所述的客戶端上設(shè)有任務(wù)調(diào)度器啟東,接收對應(yīng)于該要求的回復(fù)數(shù)據(jù);d.依據(jù)商家網(wǎng)站上的報價頁數(shù)據(jù)及第三方商品報價頁數(shù)據(jù),產(chǎn)生分析商品報價頁面數(shù)據(jù),建立價格變動數(shù)據(jù)、報價表數(shù)據(jù)、降價表數(shù)據(jù)及報價歷史表數(shù)據(jù)的數(shù)據(jù)分析入庫。
2.根據(jù)權(quán)利要求1所述的一種計算機顯示快速更新報價信息的方法,其特征在于所述 的采集規(guī)則采集的數(shù)據(jù)為商品名稱、企業(yè)名稱、企業(yè)地址、價格、庫存狀態(tài)的信息,采集規(guī)則 上設(shè)有更新機制,將代碼特征輸入到更新規(guī)則的數(shù)據(jù)庫中。
3.根據(jù)權(quán)利要求1所述的一種計算機顯示快速更新報價信息的方法,其特征在于所述 的服務(wù)器的服務(wù)端負責(zé)商品數(shù)據(jù)、采集規(guī)則數(shù)據(jù)源提供,每個商家的商品數(shù)據(jù)由第三方程 序采集后寫入數(shù)據(jù)庫,數(shù)據(jù)信息包括商家編號、商品編號、商品URI、分類、標題、價格、是否 更新、商品介紹、更新時用數(shù)據(jù)信息。
4.根據(jù)權(quán)利要求1所述的一種計算機顯示快速更新報價信息的方法,其特征在于所述 的客戶端根據(jù)調(diào)度器啟動客戶端,啟動多線程機制分別向服務(wù)端請求商品信息,并且根據(jù) 商品URL請求到實時的商品頁面內(nèi)容;所述的系統(tǒng)調(diào)度器根據(jù)需要更新的商家數(shù)量和更新 頻率平均分配調(diào)度時間點,安排每個客戶端的啟動時間,客戶端啟動的進程數(shù)量可以通過 配置文件進行設(shè)置。客戶端和服務(wù)端之間基于二進制遠程傳輸協(xié)議實現(xiàn)數(shù)據(jù)通信,當(dāng)商家 的客戶端被啟動時,會創(chuàng)建若干個線程同時向服務(wù)端請求商品信息,這時服務(wù)端從商品采 集庫中讀取商家商品數(shù)據(jù)分別傳送給客戶端,客戶端一個進程即可以完成一次完整的數(shù)據(jù) 請求工作,若干個進程同時啟動就實現(xiàn)了多任務(wù)并發(fā)執(zhí)行數(shù)據(jù)更新,如果再開啟一個客戶 端,那么又可以創(chuàng)建若干個進程來完成下一批商品數(shù)據(jù)的更新工作,這樣的客戶端可以由 調(diào)度器來決定啟動次數(shù)和調(diào)用的頻率。
5.根據(jù)權(quán)利要求1所述的一種計算機顯示快速更新報價信息的方法,其特征在于所述 數(shù)據(jù)分析入庫對采集后的數(shù)據(jù)需要進行規(guī)范化處理,分析商品的價格和異常數(shù)據(jù)處理,所 述的商品價格解析進程取到服務(wù)端返回的商品數(shù)據(jù)集合后,會循環(huán)讀取出商品的URL地 址向網(wǎng)站請求商品頁面內(nèi)容,同時讀取采集規(guī)則設(shè)置的參數(shù)信息分析出本次請求的商品價 格內(nèi)容,然后與本地價格比較,如果發(fā)現(xiàn)商品價格不相同,則向產(chǎn)品降價表寫入一條數(shù)據(jù), 同時也更新采集數(shù)據(jù)庫中的價格和更新時間信息。針對降價表內(nèi)的數(shù)據(jù),會根據(jù)用戶訂閱 的內(nèi)容,讀取出當(dāng)天最新降價的商品向客戶發(fā)送降價商品信息,所述的異數(shù)據(jù)常處理在向 商家站點請求商品數(shù)據(jù)過程中可能會因為網(wǎng)絡(luò)連接、服務(wù)器關(guān)閉、商品下架等諸多因素,針 對此類情況,客戶端對各類異常進行捕獲,對不同的異常情況建立不同的狀態(tài)碼進行標識, 寫入采集數(shù)據(jù)庫表中,做為下次數(shù)據(jù)請求或者后期數(shù)據(jù)處理時參考使用。
全文摘要
本發(fā)明涉及計算機程序技術(shù)領(lǐng)域,具體的說是一種計算機顯示快速更新報價信息的方法,其特征在于該方法用以采集商品報價頁數(shù)據(jù)要求,并依據(jù)該要求產(chǎn)生分析商品報價頁面數(shù)據(jù),該方法包括(1)采集規(guī)則;(2)內(nèi)容更新;(3)數(shù)據(jù)分析入庫。本發(fā)明與現(xiàn)有技術(shù)相比,實現(xiàn)自動化處理,高效率執(zhí)行多個商家、不同商品報價可啟動多任務(wù)更新執(zhí)行,容錯性強,使商品信息在數(shù)據(jù)庫中保持良好的有效性和正確性,智能數(shù)據(jù)處理,采集后的數(shù)據(jù)自動分析價格漲跌,分別進入商品降價表和報價信息表,為頁面展示商品價格歷史提供數(shù)據(jù)。
文檔編號G06Q30/00GK101853466SQ20101017788
公開日2010年10月6日 申請日期2010年5月18日 優(yōu)先權(quán)日2010年5月18日
發(fā)明者任學(xué)寧, 王海濤, 陳瑞城 申請人:上海購龍信息科技有限公司
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
肃南| 得荣县| 山东| 酒泉市| 肥西县| 清丰县| 搜索| 保靖县| 枣强县| 仁怀市| 松原市| 内乡县| 商水县| 亳州市| 灵寿县| 泸定县| 苏尼特右旗| 绍兴市| 高雄市| 都昌县| 贵港市| 波密县| 隆化县| 长岛县| 蓬莱市| 灌阳县| 永仁县| 武隆县| 石楼县| 民丰县| 汉川市| 穆棱市| 泌阳县| 南陵县| 双峰县| 连州市| 永丰县| 三河市| 思南县| 正定县| 治多县|