專利名稱：用于生成先前觀看的多媒體內(nèi)容的可視摘要的系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于表現(xiàn)多媒體內(nèi)容的系統(tǒng)和方法。具體地說，本發(fā)明旨在提供在重新開始未觀看的多媒體內(nèi)容之前的先前觀看的多媒體內(nèi)容的可視摘要。
背景技術(shù)：
移動電話已從僅語音的電子裝置演進(jìn)為多功能的電子裝置。例如，移動電話現(xiàn)在可以充當(dāng)電子記事簿、數(shù)碼相機(jī)、音頻應(yīng)用(例如，MP3播放器)、視頻應(yīng)用(例如，視頻播放器)、視頻游戲終端等。而且，移動電話不僅用于語音通信，而且它們也用在各種其它形式中(例如，在即時(shí)消息收發(fā)應(yīng)用、共享圖片、訪問因特網(wǎng)上的信息等中)。另外，消費(fèi)者以越來越快的速度消費(fèi)他們的移動裝置上的視頻內(nèi)容。除了在YouTube 上的短的視頻剪輯以外，人們現(xiàn)在還在他們的移動裝置上觀看較長的電影、TV演出和視頻播客。因?yàn)橐苿友b置的用戶一般不具有長的不間斷的時(shí)段，所以通常在多個分開的時(shí)間段中消費(fèi)較長的多媒體內(nèi)容。在中斷的可能性很大的移動環(huán)境中格外如此。

發(fā)明內(nèi)容
當(dāng)在較長的中斷后在移動裝置上重新開始多媒體內(nèi)容的回放時(shí)用戶所面對的問題是回憶中斷之前剛剛發(fā)生的內(nèi)容。例如，“在故事中發(fā)生了什么？ ”；“在演講中先前說了什么？”等等。相關(guān)的、并且同等重要的問題是以恰當(dāng)?shù)那榫w或心情取得先前內(nèi)容的概觀以觀看多媒體內(nèi)容的未觀看部分。存在著針對動態(tài)地生成可視摘要的系統(tǒng)和方法的強(qiáng)烈的需要，以在用戶在中斷(或自發(fā)的休息)之后重新開始觀看多媒體內(nèi)容時(shí)幫助電子裝置的用戶回憶先前觀看的內(nèi)容。本發(fā)明的一個方面涉及用于重新開始多媒體內(nèi)容回放以在電子裝置上進(jìn)行顯示的方法，該方法包括:從用戶輸入裝置接收用于呈現(xiàn)多媒體內(nèi)容的命令，其中，多媒體內(nèi)容包括先前觀看的多媒體內(nèi)容和未觀看的多媒體內(nèi)容；選擇先前觀看的多媒體內(nèi)容的一個或更多個片段；在電子裝置的顯示器上顯示與所選擇的一個或更多個片段相對應(yīng)的縮略圖，以提供先前觀看的內(nèi)容的可視摘要；并且在顯示器上顯示至少一部分的可視摘要之后顯示未觀看的多媒體內(nèi)容的至少一部分。本發(fā)明的另一方面涉及基于片段選擇算法來選擇一個或更多個片段。本發(fā)明的另一方面涉及基于將先前觀看的多媒體內(nèi)容劃分為固定量的先前觀看的片段來選擇一個或更多個片段。本發(fā)明的另一方面涉及將各先前觀看的片段的一部分進(jìn)行聚合以形成一個或更多個片段。本發(fā)明的另一方面涉及以拼貼畫格式在顯示器上呈現(xiàn)所選擇的一個或更多個片段各自的縮略圖。本發(fā)明的另一方面涉及基于先前觀看的內(nèi)容的時(shí)間次序以順序的方式呈現(xiàn)所選擇的一個或更多個片段各自的縮略圖。本發(fā)明的另一方面涉及接收用戶輸入以繞過可視摘要的至少一部分的顯示。本發(fā)明的一方面涉及一種電子裝置，該電子裝置包括:存儲器，其用于存儲多媒體內(nèi)容和內(nèi)容回顧應(yīng)用；用戶輸入裝置，用于接收用于呈現(xiàn)存儲在所述電子裝置上的多媒體內(nèi)容的命令，其中，多媒體內(nèi)容包括至少一個多媒體應(yīng)用，所述至少一個多媒體應(yīng)用包括先前觀看的多媒體內(nèi)容和未觀看的多媒體內(nèi)容；處理器，其連接到用戶輸入裝置和存儲器，其中，處理器根據(jù)內(nèi)容回顧應(yīng)用對先前觀看的多媒體內(nèi)容進(jìn)行處理，以選擇一個或更多個片段來形成可視摘要，所述可視摘要包括與先前觀看的多媒體內(nèi)容的一個或更多個所選擇的片段相對應(yīng)的縮略圖；以及顯示器，其連接到所述處理器，其中，所述顯示器在顯示未觀看的多媒體內(nèi)容的至少一部分之前將可視摘要呈現(xiàn)到關(guān)聯(lián)的電子裝置。本發(fā)明的另一方面涉及作為移動電話的電子裝置。本發(fā)明的另一方面涉及作為鍵盤的用戶輸入裝置。本發(fā)明的另一方面涉及作為觸摸屏的用戶輸入裝置。本發(fā)明的另一方面涉及內(nèi)容回顧應(yīng)用基于片段選擇算法來處理先前觀看的多媒體內(nèi)容。本發(fā)明的另一方面涉及基于將先前觀看的多媒體內(nèi)容劃分為固定量的先前觀看的片段來所述一個或更多個片段。本發(fā)明的另一方面涉及將針對各先前觀看的片段的縮略圖進(jìn)行累積以形成可視摘要。本發(fā)明的另一方面涉及可視摘要是呈現(xiàn)在顯示器上的拼貼畫，其中，拼貼畫包括與所選擇的一個或更多個片段的每一個相關(guān)聯(lián)的縮略圖。本發(fā)明的另一方面涉及至少一個縮略圖與所選擇的片段的視頻剪輯相關(guān)聯(lián)。本發(fā)明的另一方面涉及可視摘要，所述可視摘要包括基于先前觀看的內(nèi)容的時(shí)間次序以順序的方式呈現(xiàn)所選擇的一個或更多個片段各自的縮略圖。本發(fā)明的另一方面涉及可視摘要，所述可視摘要包括嵌入在所述可視摘要內(nèi)的一個或更多個廣告。本發(fā)明的另一方面涉及可視摘要，所述可視摘要包括處于所述可視摘要中的一個或更多個產(chǎn)品位置索引。在研究了下面的圖和詳細(xì)的描述后，對于本領(lǐng)域技術(shù)人員來說，本發(fā)明的其它系統(tǒng)、裝置、方法、特征和優(yōu)點(diǎn)將是明顯的或?qū)⒆兊妹黠@。旨在將這樣的附加的系統(tǒng)、方法、特征和優(yōu)點(diǎn)都包括在該說明書內(nèi)，在本發(fā)明的范圍內(nèi)，并由所附權(quán)利要求所保護(hù)。應(yīng)當(dāng)強(qiáng)調(diào)，當(dāng)在本說明書中使用措辭“包括”時(shí)，用來指定所陳述的特征、要件、步驟或組件的存在，但不排除一個或更多個其它特征、要件、步驟、組件或它們的組的存在或添加。


以下參照附圖討論本發(fā)明的前述實(shí)施方式和其它實(shí)施方式。圖中的組件不必一定按照比例繪制，而將重點(diǎn)放在清楚地例示本發(fā)明的原理。同理，在一個圖中描述的元件和特征可以與在另外圖中所描述的元件和特征組合。而且，在圖中，相同的標(biāo)號貫穿多幅圖指示對應(yīng)的部件。圖1是根據(jù)本發(fā)明的作為示例性電子裝置的移動電話的一種實(shí)施方式的示意圖。圖2是圖1的移動電話的相關(guān)部分的示意性框圖。圖3是其中圖1的移動電話可以進(jìn)行操作的通信系統(tǒng)的示意圖。圖5至圖7是表示根據(jù)本發(fā)明的方面的選擇多媒體內(nèi)容的一個或更多個片段和顯示多媒體內(nèi)容的可視摘要的示例性方法的流程圖。圖8是根據(jù)本發(fā)明的方面的示例性拼貼畫。
具體實(shí)施例方式在隨后的詳細(xì)描述中，對相似的組件給出相同的標(biāo)號，而不管它們是否在本發(fā)明的不同的實(shí)施方式中被示出。為了以清楚和簡潔的方式例示本發(fā)明，這些圖不必一定按照比例繪制，并且特定的特征可以按照某種示意性的形式示出?，F(xiàn)在將參照附圖描述本發(fā)明，其中，相同的標(biāo)號始終用于表不相似的兀件。術(shù)語“電子裝置”包括利用電氣組件來執(zhí)行通信任務(wù)的任何類型的裝置，并包括諸如移動電話、尋呼機(jī)、通信機(jī)、電子記事簿、個人數(shù)字助理(PDA)、智能電話、便攜式通信裝置等這樣的全部設(shè)備。其它示例性電子裝置可以包括但不限于便攜式媒體播放器、媒體播放器、回放裝置、媒體唱機(jī)、數(shù)字視頻盤播放器等。在本申請中，主要在移動電話的背景中描述本發(fā)明。但是，將理解的是，本發(fā)明不被限于移動電話，并可以是任何類型的電子裝置。本發(fā)明涉及用于表現(xiàn)多媒體內(nèi)容的系統(tǒng)和方法，其中，在觀看多媒體內(nèi)容被暫停和/或中斷之后并且在繼續(xù)先前未觀看的多媒體內(nèi)容之前將先前觀看的多媒體內(nèi)容的可視摘要呈現(xiàn)給用戶。例如，電子裝置的用戶正在形成在電子裝置中的和/或連接到電子裝置的顯示器上觀看具有一定的持續(xù)時(shí)間的電視節(jié)目。在觀看電視節(jié)目達(dá)一段時(shí)間后，用戶被中斷并必須暫停和/或停止觀看電視節(jié)目。一個小時(shí)后，用戶想繼續(xù)觀看電視節(jié)目的其余部分。當(dāng)在中斷后重新開始多媒體內(nèi)容的回放時(shí)，用戶面對的問題是回憶中斷之前發(fā)生了什么。例如，“在故事中發(fā)生了什么？ ”；“在演講中先前說了什么？”等等。相關(guān)的、并且同等重要的問題是使用戶回到恰當(dāng)?shù)那榫w和/或心情以觀看多媒體內(nèi)容的特定部分。參照圖1，示出了根據(jù)本發(fā)明的方面的電子裝置10。在示例性實(shí)施方式中所例示的電子裝置10是移動電話，并將被稱為移動電話10。移動電話10被示出為具有“磚塊”或“塊”的形式因素(form factor)的殼體，但應(yīng)理解的是，可以利用其它類型的殼體，諸如“翻蓋”形式因素(例如，“蛤殼”殼體)、滑動類型形式因素(例如，“滑蓋式”殼體);或者例如觸摸屏類型的殼體。首先參照圖1和圖2，示出了示例性移動電話10。如下面將要討論的，移動電話10包括可以存儲在移動電話10的存儲器(例如，存儲器16)中的可視摘要應(yīng)用14?？梢曊獞?yīng)用14可以用于在觀看多媒體內(nèi)容發(fā)生中斷后重新開始多媒體內(nèi)容的回放。一般來說，用戶輸入命令以對未完全展現(xiàn)給用戶的多媒體內(nèi)容繼續(xù)進(jìn)行展現(xiàn)。因而，多媒體內(nèi)容將通常包括先前觀看的多媒體內(nèi)容(例如，已呈現(xiàn)給用戶的多媒體內(nèi)容)和未觀看的多媒體內(nèi)容(例如，用戶尚未觀看的多媒體內(nèi)容)?？梢曊獞?yīng)用14 一般選擇先前觀看的多媒體內(nèi)容的一個或更多個片段，并在電子裝置的顯示器上顯示與所選擇的一個或更多個片段相對應(yīng)的縮略圖以提供先前觀看的內(nèi)容的可視摘要。在顯示了可視摘要后，可以將未觀看的多媒體內(nèi)容呈現(xiàn)給用戶。針對本公開的目的，縮略圖是用于提供到諸如較大版本的圖像和/或與縮略圖相關(guān)聯(lián)的視頻剪輯這樣的其它內(nèi)容的鏈接的縮小版本的圖像。移動電話10可以包括顯示器18。顯示器18可以與移動電話10集成,或者顯示器可以連接到移動電話(例如，類似于連接到電視機(jī)的DVD播放器)。顯示器18通過使用戶能夠利用移動電話10的各種功能的圖形用戶界面(GUI)向用戶顯示諸如工作狀態(tài)、時(shí)間、電話號碼、聯(lián)系人信息、各種導(dǎo)航菜單等這樣的信息。顯示器18還可以用于可視地顯示由移動電話10接收到的內(nèi)容和/或從存儲器16 (圖2)或可操作地連接到移動電話10的其它存儲元件所取得的內(nèi)容。顯示器18可以用于向移動電話10的用戶呈現(xiàn)多媒體內(nèi)容。多媒體內(nèi)容可以是任何類型的內(nèi)容，并包括例如圖像、視頻和諸如照片這樣的其它圖形、因特網(wǎng)內(nèi)容、狀態(tài)信息、電影、歌曲、視頻、播客、通過各種菜單導(dǎo)航和/或與移動電話10相關(guān)聯(lián)的應(yīng)用等。移動電話10還可以包括用戶輸入裝置20。這樣的用戶輸入裝置可以是鍵盤、觸摸屏(未示出)、麥克風(fēng)22和/或?qū)Ш芥I24。用戶輸入裝置20 —般提供多種用戶輸入操作。例如，用戶輸入裝置20可以包括數(shù)字字母鍵，以允許輸入諸如電話號碼、電話列表、聯(lián)系人信息、注解等這樣的數(shù)字字母信息(例如，鍵盤)。另外，用戶輸入裝置20可以包括特殊功能鍵26，諸如用于發(fā)起或應(yīng)答呼叫的“呼叫發(fā)送”鍵以及用于結(jié)束或“掛斷”呼叫的“呼叫結(jié)束”鍵。特殊功能鍵26還可以包括菜單導(dǎo)航和選擇鍵以有助于通過顯示在顯示器18上的菜單進(jìn)行導(dǎo)航。例如，可以存在指點(diǎn)裝置和/或?qū)Ш芥I以接受來自用戶的定向輸入。特殊功能鍵26可以包括視聽內(nèi)容回放鍵，以開始、停止和暫停回放、跳過或重復(fù)音軌(track)等。與移動電話相關(guān)聯(lián)的其它鍵可以包括音量鍵、靜音鍵、開/關(guān)電源鍵、網(wǎng)絡(luò)瀏覽器啟動鍵、相機(jī)鍵等。鍵或與鍵類似的功能還可以具體實(shí)現(xiàn)為與顯示器18相關(guān)聯(lián)的觸摸屏。另外，顯示器18和用戶輸入裝置20可以彼此結(jié)合地使用以實(shí)現(xiàn)軟鍵功能。移動電話10包括呼叫電路，呼叫電路使移動電話10能夠與被叫/主叫裝置(通常是另一移動電話或固定電話)建立呼叫并且/或者交換信號。但是，被叫/主叫裝置不需是另一電話，但可以是諸如因特網(wǎng)網(wǎng)絡(luò)瀏覽器、內(nèi)容提供服務(wù)器等這樣的某些其它裝置。可以采用任何適當(dāng)?shù)男问竭M(jìn)行呼叫。例如，呼叫可以是經(jīng)由蜂窩電路交換網(wǎng)絡(luò)建立的常規(guī)呼口 4，或者是經(jīng)由蜂窩網(wǎng)絡(luò)的分組交換性能或經(jīng)由諸如WiFi (例如，基于IEEE802.11標(biāo)準(zhǔn)的網(wǎng)絡(luò))、WiMAX (例如，基于IEEE802.16標(biāo)準(zhǔn)的網(wǎng)絡(luò))等這樣的另選的分組交換網(wǎng)絡(luò)而建立的因特網(wǎng)協(xié)議上的語音(VoIP)呼叫。另一示例包括經(jīng)由蜂窩網(wǎng)絡(luò)或另選的網(wǎng)絡(luò)而建立的能夠進(jìn)行視頻的呼叫。移動電話10可以被配置為對諸如文本消息(例如，文本消息被某些人統(tǒng)稱為“SMS”，表示簡單的消息服務(wù))、即時(shí)消息、電子郵件消息、多媒體消息(例如，多媒體消息被某些人統(tǒng)稱為“麗S”，表示多媒體消息服務(wù))、圖像文件、視頻文件、音頻文件、鈴音、音頻流、視頻流、數(shù)據(jù)饋送(包括播客)等這樣的數(shù)據(jù)進(jìn)行發(fā)送、接收和/或處理。對這樣的數(shù)據(jù)進(jìn)行處理可以包括:在存儲器16中存儲數(shù)據(jù)；執(zhí)行應(yīng)用以允許用戶與數(shù)據(jù)進(jìn)行交互；顯示與數(shù)據(jù)相關(guān)聯(lián)的視頻內(nèi)容和/或圖像內(nèi)容；輸出與數(shù)據(jù)相關(guān)聯(lián)的聲音等。圖2示出了移動電話10的功能框圖。為了簡短，這里將不再詳細(xì)地描述移動電話10的一般的常規(guī)的功能。移動電話10包括主控制電路30，主控制電路30被配置為對移動電話10的功能和操作進(jìn)行總體控制?？刂齐娐?0可以包括諸如CPU、微控制器或微處理器這樣的處理裝置32。處理裝置32執(zhí)行存儲在控制電路30內(nèi)的存儲器(未示出)中的和/或存儲在諸如存儲器16這樣的單獨(dú)的存儲器中的代碼，以執(zhí)行移動電話10的操作。存儲器16例如是緩沖器、閃存、硬盤驅(qū)動器、可移除介質(zhì)、易失性存儲器、非易失性存儲器、隨機(jī)存儲器(RAM)或其它適當(dāng)?shù)难b置中的一個或更多個。存儲器16可以存儲來自任何源的多媒體內(nèi)容。例如，可以從服務(wù)器(例如，因特網(wǎng)、YouTube 、Itunes 等)下載多媒體內(nèi)容，從存儲裝置(例如，光盤驅(qū)動器、閃存驅(qū)動器、SD、MemoryStick 等)讀取多媒體內(nèi)容。多媒體內(nèi)容可以包括本地地存儲在移動電話10的存儲器16 (圖2)中的和/或從移動電話10遠(yuǎn)程地存儲(例如，在遠(yuǎn)程存儲裝置、媒體服務(wù)器、遠(yuǎn)程個人計(jì)算機(jī)等上)的音頻和/或視頻表達(dá)?？梢詮睦绨ㄒ纛l和/或視頻文件的多媒體文件、從接收到的移動無線電和/或電視信號等獲得這樣的表達(dá)。在多數(shù)情況下，視頻表達(dá)伴隨有音頻表達(dá)。例如，所顯示的視頻分量可以是電視節(jié)目和/或音樂視頻，其中，對應(yīng)的音頻分量可以是旨在與視頻分量相同步的音頻。作為另一示例，所顯示的視頻分量可以對應(yīng)于接收到的移動電視信號，并且對應(yīng)的音頻分量可以是意在與視頻分量同步的語音和/或音樂。存儲器16還可以存儲一個或更多個應(yīng)用(例如，可視摘要應(yīng)用14)以有助于生成如本文所討論的可視摘要。存儲器16可操作地連接到處理器32以執(zhí)行處理器中所存儲的一個或更多個應(yīng)用。將處理器32編程為執(zhí)行本文所描述的功能，例如，控制一個或更多個軟件應(yīng)用、接收和存儲用戶輸入、生成可視摘要等。處理裝置32可以執(zhí)行實(shí)現(xiàn)了可視摘要應(yīng)用14的代碼。對于計(jì)算機(jī)編程領(lǐng)域、具體地在針對移動電話或其它電子裝置的應(yīng)用編程領(lǐng)域的技術(shù)人員來說，如何對移動電話10編程以操作和執(zhí)行本文描述的與可視摘要應(yīng)用14相關(guān)聯(lián)的邏輯功能將是明顯的。因此，為了簡短，省去了關(guān)于具體的編程代碼的細(xì)節(jié)。另外，盡管可以根據(jù)本發(fā)明的優(yōu)選實(shí)施方式由處理裝置32執(zhí)行可視摘要應(yīng)用14，但在不偏離本發(fā)明的范圍的情況下，這樣的功能也可以由專用的硬件、固件、軟件或它們的組合來執(zhí)行。繼續(xù)參照圖1和圖2，移動電話10包括連接到無線電電路36的天線34。如常規(guī)的那樣，無線電電路36包括用于經(jīng)由天線34發(fā)送和接收信號的射頻發(fā)射器和接收器。無線電電路36可以被配置為在移動通信系統(tǒng)中進(jìn)行操作并可以用于發(fā)送和接收數(shù)據(jù)和/或視聽內(nèi)容。與移動無線電網(wǎng)絡(luò)和/或廣播網(wǎng)絡(luò)進(jìn)行交互的接收器類型包括(但不限于)GSM、CDMA、WCDMA、GPRS、WiF1、WiMax、DVB-H、ISDB-T 等以及這些標(biāo)準(zhǔn)的高級版本。移動電話10還包括聲音信號處理電路38,聲音信號處理電路38用于處理由無線電電路36發(fā)送的音頻信號以及從無線電電路36接收的音頻信號。連接到聲音處理電路38的是揚(yáng)聲器40和麥克風(fēng)42,如常規(guī)的那樣,揚(yáng)聲器40和麥克風(fēng)42使用戶能夠通過移動電話10進(jìn)行收聽和講話。無線電電路36和聲音信號處理電路38各自連接到控制電路30以執(zhí)行總體操作。音頻數(shù)據(jù)可以從控制電路30傳遞到聲音信號處理電路38以向用戶回放音頻。音頻數(shù)據(jù)例如可以包括來自存儲在存儲器16中的音頻文件的并由控制電路30所獲取的音頻數(shù)據(jù)，或者諸如來自移動無線電服務(wù)的音頻數(shù)據(jù)流形式的接收到的音頻數(shù)據(jù)。聲音處理電路38可以包括任何適當(dāng)?shù)木彌_器、解碼器、放大器等。
顯示器18可以通過視頻處理電路44連接到控制電路30，視頻處理電路44將視頻數(shù)據(jù)轉(zhuǎn)換為用于對顯示器18進(jìn)行驅(qū)動的視頻信號。視頻處理電路44可以包括任何適當(dāng)?shù)木彌_器、解碼器、視頻數(shù)據(jù)處理器等。視頻數(shù)據(jù)可以由控制電路30生成、由可視摘要應(yīng)用14生成、從存儲在存儲器16中的視頻文件獲取、從由無線電電路36所接收的入局視頻數(shù)據(jù)流得到或通過任何其它適當(dāng)?shù)姆椒ǐ@得。移動電話10還可以包括一個或更多個I/O接口 46。I/O接口 46可以是一般的移動電話I/o接口的形式并可以包括一個或更多個電連接器。典型地，I/o接口 46可以用于將移動電話10連接到電池充電器以對移動電話10內(nèi)的電源單元(PSU) 48的電池進(jìn)行充電。作為補(bǔ)充或另選地，I/O接口 46可以用于將移動電話10連接到耳機(jī)組件(例如，個人免提(PHF)裝置)，耳機(jī)組件具有與移動電話10的有線接口。此外，I/O接口 46可以用于將移動電話10經(jīng)由用于數(shù)據(jù)交換的數(shù)據(jù)線纜連接到個人計(jì)算機(jī)或其它裝置。當(dāng)連接到車輛電源適配器或電力輸出口電源適配器時(shí)，移動電話10可以經(jīng)由I/O接口 46接收操作電力。移動電話10還可以包括系統(tǒng)時(shí)鐘50，系統(tǒng)時(shí)鐘50用于對諸如控制電路30這樣的移動電話10的各種組件進(jìn)行定時(shí)?？刂齐娐?0轉(zhuǎn)而可以執(zhí)行定時(shí)功能，諸如對呼叫的持續(xù)時(shí)間進(jìn)行定時(shí)、生成時(shí)間戳和日期戳的內(nèi)容等。移動電話10可以包括用于拍攝數(shù)字圖片和/或電影的相機(jī)52。與圖片和/或電影相對應(yīng)的圖像和/或視頻文件可以存儲在存儲器16中。移動電話10還可以包括位置數(shù)據(jù)接收器54，諸如全球定位系統(tǒng)(GPS)接收器、伽利略衛(wèi)星系統(tǒng)接收器等。移動電話10還可以包括諸如紅外收發(fā)器和/或RF接口(例如，藍(lán)牙接口、IEEE802.11兼容接口)這樣的局域無線接口 56，以與附件、另一移動無線電終端、計(jì)算機(jī)、另一裝置、多媒體內(nèi)容的遠(yuǎn)程源等建立通信。例如，局域無線接口 56可以可操作地將移動電話10連接到遠(yuǎn)程服務(wù)器(例如，因特網(wǎng)服務(wù)器)以下載存儲在遠(yuǎn)程服務(wù)器上的多媒體內(nèi)容。另外參照圖3,移動電話10可以被配置為作為通信系統(tǒng)70的一部分而進(jìn)行操作。系統(tǒng)70可以包括具有服務(wù)器74 (或多個服務(wù)器)的通信網(wǎng)絡(luò)72，服務(wù)器74用于管理由移動電話10發(fā)起的呼叫和去往移動電話10的呼叫、向移動電話10發(fā)送數(shù)據(jù)以及執(zhí)行任何其它的支持功能。通信網(wǎng)絡(luò)72還可以包括多媒體服務(wù)器76。如本文所使用的，“多媒體服務(wù)器”是其上具有存儲的多媒體內(nèi)容的并且/或者能夠被訪問以從另一服務(wù)器取得多媒體內(nèi)容的服務(wù)器。多媒體服務(wù)器76能夠提供多媒體內(nèi)容以由移動電話10或其它電子裝置來表現(xiàn)。如上文所闡述的，這樣的多媒體內(nèi)容可以包括電影、電視節(jié)目、播客、因特網(wǎng)內(nèi)容等。通信網(wǎng)絡(luò)72的各組件(例如，服務(wù)器74和多媒體服務(wù)器76)通過一種或更多種不同的傳輸介質(zhì)與移動電話10進(jìn)行通信。傳輸介質(zhì)可以是任何適當(dāng)?shù)难b置或組件，其包括例如通信塔(例如，小區(qū)塔)、另一移動電話、無線接入點(diǎn)、衛(wèi)星等。部分的網(wǎng)絡(luò)可以包括無線傳輸路徑。網(wǎng)絡(luò)72可以支持多個移動電話10和其它類型的終端用戶裝置的通信活動。如將要理解的，服務(wù)器74和76可以被配置為用于執(zhí)行服務(wù)器功能的一般的計(jì)算機(jī)系統(tǒng)，并且可以包括處理器，處理器被配置為執(zhí)行包含實(shí)現(xiàn)了服務(wù)器74和76的功能的邏輯指令的軟件。另外參照圖4，例示了實(shí)現(xiàn)示例性方法100的邏輯操作，示例性方法100用于針對在電子裝置上的顯示重新開始多媒體內(nèi)容的回放。方法100 —般可用于當(dāng)用戶觀看多媒體內(nèi)容并在多媒體內(nèi)容結(jié)束之前被中斷或經(jīng)歷長的暫停時(shí)的情況。本領(lǐng)域技術(shù)人員將容易地理解的是，方法100還可以用于記錄諸如搜索音樂和/或視頻的庫這樣的用戶交互。可以提供例示了用戶所觀看的各種音樂和/或視頻內(nèi)容的視頻摘要。在框102，該方法包括從用戶輸入裝置接收呈現(xiàn)多媒體內(nèi)容的命令。針對本公開的目的，將假設(shè)多媒體內(nèi)容包括先前觀看的多媒體內(nèi)容和未觀看的多媒體內(nèi)容。在框104，可以選擇先前觀看的多媒體內(nèi)容的一個或更多個片段，以用作先前觀看的多媒體內(nèi)容的可視摘要?？梢酝ㄟ^任何適當(dāng)?shù)臋C(jī)制來選擇一個或更多個片段。例如，參照圖5，在一種實(shí)施方式中，通過將多媒體內(nèi)容的先前觀看的部分再劃分為固定的量來選擇一個或更多個片段。本領(lǐng)域技術(shù)人員將容易理解的是，例如可以由用戶對片段的數(shù)目進(jìn)行設(shè)置，基于多媒體內(nèi)容的觀看的部分的長度來動態(tài)地確定片段的數(shù)目，由內(nèi)容的創(chuàng)作者來選定片段的數(shù)目。在圖5中，將多媒體內(nèi)容分為兩個部分。第一部分是先前觀看的內(nèi)容(A)，并且第二部分是未觀看的內(nèi)容(B)。為了方便，先前觀看的內(nèi)容(A)以實(shí)線示出并且未觀看的內(nèi)容(B)以虛線示出。觀看的內(nèi)容(A)從時(shí)間t=0延伸到tp=15分鐘,其中t=0是多媒體內(nèi)容的開始，并且tp是多媒體內(nèi)容被用戶停止和/或暫停的時(shí)間。t=0到tp的這一時(shí)段對應(yīng)于觀看的多媒體內(nèi)容的經(jīng)歷時(shí)間。從tp到的時(shí)段對應(yīng)于未觀看的多媒體內(nèi)容。如上所述，可以對先前觀看的多媒體內(nèi)容(A)的一個或更多個片段進(jìn)行再劃分。如圖5所示，存在八(8)個所選擇的片段(SI至S8)。例如，通過簡單地將所經(jīng)歷的時(shí)間除以片段的數(shù)目來選擇這些片段。同樣，在每個所指定的時(shí)隙處開始的片段可以被選擇為可視摘要。例如，如果電視節(jié)目具有長度為25分鐘的持續(xù)時(shí)間，并且在用戶暫停和/或另外停止回放移動電話10上的電視節(jié)目之前已經(jīng)在先觀看了 15分鐘，則將存在15分鐘的先前觀看的多媒體內(nèi)容和10分鐘的未看的多媒體內(nèi)容。15分鐘的先前觀看的多媒體內(nèi)容可以被劃分為所選擇的片段的數(shù)目(例如，在圖5中例示的8個片段)。因而，所選擇的多媒體內(nèi)容片段例如將包括在每1/N*個所經(jīng)歷的時(shí)間處出現(xiàn)的片段(其中，N是片段的數(shù)目)。本發(fā)明的另一實(shí)施方式例示在圖6中。在圖6中，根據(jù)算法進(jìn)行再劃分(例如，SI至S9)。例如，算法可以對應(yīng)于映射到先前觀看的多媒體內(nèi)容之上的標(biāo)準(zhǔn)化的曲線。這樣的算法可以在先前觀看的內(nèi)容的序列的開始處和結(jié)束處放置更多的樣本點(diǎn)，或者在中間放置更多的樣本點(diǎn)，或者在結(jié)束處放置更多的樣本點(diǎn)，以符合人類記憶的一個或更多個模型。例如，人類記憶的模型已經(jīng)示出，人對多媒體內(nèi)容的開始片段和結(jié)束片段具有更好的回憶。另外，也可以考慮編劇類型的三幕式結(jié)構(gòu)。如圖6所示，通過使先前觀看的內(nèi)容的中間部分比在該內(nèi)容的開始部分和/或結(jié)束部分具有更多的片段，可以實(shí)現(xiàn)這樣的三幕式結(jié)構(gòu)。例如，圖6例示了具有兩(2)個片段(分別是SI至S2和S8至S9)的開始部分和結(jié)束部分，同時(shí)中間部分具有五(5)個所選擇的片段。在另一實(shí)施方式中，如關(guān)于圖5和圖6所描述的，可以計(jì)算片段，除了每個片段的開始可以向后或向前調(diào)整以落在消失為黑色之后的最近片段上(這經(jīng)常戲劇地與場景中的變化相關(guān))以外；還向后或向前調(diào)整到最近的硬編碼的章節(jié)劃分；從一系列快速的場景變化向后或向前調(diào)整；從包含持續(xù)的對話的片段和/或伴隨有多媒體內(nèi)容的強(qiáng)烈的音軌之后的片段向后或向前調(diào)整。另外，可以基于先前觀看的多媒體內(nèi)容的一個或更多個特性來動態(tài)地選擇和/或調(diào)整片段。在圖7中所例示的另一實(shí)施方式中，可以針對全部多媒體內(nèi)容的部分預(yù)先限定片段。例如，如果在處出現(xiàn)暫停，則將選擇片段SI和S2以形成可視摘要。如果在t2處出現(xiàn)暫停，則將選擇片段SI到S5以形成可視摘要。同理，如果在t3處出現(xiàn)暫停，將選擇片段SI到S7以形成可視摘要。提供用于選擇一個或更多個多媒體內(nèi)容片段的上面的方法是為了例示的目的而不是要限制所附權(quán)利要求的范圍。在框106，在電子裝置的顯示器上顯示與所選擇的一個或更多個片段相對應(yīng)的縮略圖，以提供先前觀看的內(nèi)容的可視摘要。將與各個所選擇的片段相關(guān)聯(lián)的縮略圖進(jìn)行聚合以形成可視摘要?？梢曊梢园凑杖魏蜗Ｍ姆绞絹沓尸F(xiàn)。在一種實(shí)施方式中，可視摘要以拼貼畫樣式的表達(dá)模式呈現(xiàn)。在另一實(shí)施方式中，可視摘要以順序的表達(dá)模式呈現(xiàn)。參照圖8，在拼貼畫樣式表達(dá)模式中，可以通過針對一個或更多個所選擇的片段的順序排列的縮略圖的網(wǎng)格來實(shí)現(xiàn)對先前觀看的多媒體內(nèi)容提取摘要。縮略圖可以是先前的多媒體內(nèi)容的靜止圖像或短的視頻循環(huán)。如圖8所示，按照有序的方式顯示縮略圖1至8，并且視頻剪輯構(gòu)成了最后的縮略圖。用戶可以選擇一個或更多個縮略圖。在選擇或執(zhí)行可視摘要時(shí)，每個縮略圖可以被放大并占據(jù)較大部分的屏幕。一旦與先前觀看的內(nèi)容的最后的片段相對應(yīng)的縮略圖被呈現(xiàn)給用戶，則多媒體內(nèi)容的未觀看的部分可以被接著呈現(xiàn)給用戶。可以按照許多方式來修改在圖8中所例示的示例性拼貼畫。例如，存在可以用于對與所選擇的片段相對應(yīng)的各種縮略圖進(jìn)行例示的許多類型的布局。例如，針對一個或更多個所選擇的片段的縮略圖可以具有不同的尺寸。也就是說，縮略圖不需具有相同的尺寸，并且布局可以類似于例如一個或更多個連環(huán)漫畫布局?？梢葬槍θ魏瓮Ｖ裹c(diǎn)動態(tài)地生成在圖8中所例示的拼貼畫網(wǎng)格。例如，在圖8中所例示的示例中，如果用戶觀看了 10多分鐘的多媒體內(nèi)容(例如，電影“Wolverrine”)并接著停止，則與所選擇的片段相對應(yīng)的選擇的片段和/或縮略圖可以是不同的，例如會生成與圖8中所例示的縮略圖不同的縮略圖。在另一實(shí)施方式中，可以在以下任何一個或更多個示例性情景中顯示可視摘要:當(dāng)用戶從列表中選擇先前觀看的內(nèi)容；當(dāng)可視摘要被合并到全屏幕視頻庫瀏覽模式；或只要在暫停多媒體內(nèi)容時(shí)就可以顯示視頻摘要。在順序的表達(dá)模式中，可視摘要可以是在重新開始最后的停止點(diǎn)處的多媒體內(nèi)容之前所回放的短序列的形式。所選擇的視頻片段會被自動地整理為短的視頻摘要。存在可以將這樣的摘要序列編輯在一起的許多方式。例如，可以在所選擇的各個片段之間進(jìn)行視頻轉(zhuǎn)變。這樣的視頻轉(zhuǎn)變效果可以包括例如3D旋轉(zhuǎn)、會聚、彈出和結(jié)束攝制組人員名單運(yùn)動、淡入淡出、分解、轉(zhuǎn)動、按比例縮小和彎曲轉(zhuǎn)變等。其它效果可以包括例如快動作、慢動作、反向快/慢動作、亮度和對比度、電流和夢幻粒子效果。在可以結(jié)合拼貼畫表達(dá)模式和順序表達(dá)模式這兩者的另一實(shí)施方式中，還可以將廣告和/或產(chǎn)品位置索引并入到可視摘要中。例如，可視摘要可以包括由多媒體內(nèi)容的發(fā)行人、多媒體內(nèi)容的創(chuàng)作者和/或第三方所選擇的一個或更多個廣告。這樣的廣告可以對應(yīng)于在多媒體內(nèi)容內(nèi)示出的并且/或者與多媒體內(nèi)容有關(guān)的一種或更多種產(chǎn)品和/或服務(wù)。在一種實(shí)施方式中，廣告可以對應(yīng)于在多媒體內(nèi)容內(nèi)不出的一系列產(chǎn)品和/或服務(wù)。用戶可以選擇產(chǎn)品和/或服務(wù)之一。在選擇時(shí)，可以在可視摘要中向用戶顯示所選擇的產(chǎn)品和/或視頻的一個或更多個縮略圖和/或視頻剪輯。在框108，在顯示器上顯示了可視摘要的至少一部分后顯示至少一部分未觀看的多媒體內(nèi)容。一般來說，在向用戶顯示未觀看的多媒體內(nèi)容之前，完全的可視摘要將呈現(xiàn)給用戶。但是，可以利用繞開機(jī)制(bypass mechanism)以允許用戶跳過部分的或全部的可視摘要。繞開機(jī)制可以是用戶可以表明跳過或繞開部分的或全部的可視摘要的意圖的任何機(jī)制。一般來說，可以通過用戶對用戶輸入裝置20進(jìn)行操作來執(zhí)行這樣的繞開機(jī)制，例如，通過按壓鍵、從可視摘要中導(dǎo)航出來等?？傊?，已經(jīng)部分地觀看的多媒體內(nèi)容通常將包括先前觀看的多媒體內(nèi)容(例如，已呈現(xiàn)給用戶的多媒體內(nèi)容)和未觀看的多媒體內(nèi)容(例如，用戶尚未觀看的多媒體內(nèi)容)?？梢曊獞?yīng)用14 一般選擇先前觀看的多媒體內(nèi)容的一個或更多個片段，并在電子裝置的顯示器上顯示所選擇的一個或更多個片段的縮略圖和/或視頻剪輯，以提供先前觀看的內(nèi)容的可視摘要。在已經(jīng)顯示了可視摘要之后，可以將未觀看的多媒體內(nèi)容呈現(xiàn)給用戶?？梢酝ㄟ^執(zhí)行例如可視摘要應(yīng)用14的實(shí)施方式來執(zhí)行示例性方法。因而，可以將圖4的流程圖考慮為描述由移動電話10所執(zhí)行的方法的步驟。盡管圖4示出了執(zhí)行功能邏輯框的特定順序，但是執(zhí)行框的順序可以相對于所示出的順序而改變。另外，連續(xù)示出的兩個或更多個框可以同時(shí)執(zhí)行或部分同時(shí)地執(zhí)行。還可以省略特定的框。另外，為了增強(qiáng)效用、決算(accounting)、性能、測量、故障排除等的目的，可以將任何數(shù)目的功能、邏輯操作、命令、狀態(tài)變量、信號或消息添加到邏輯流程。應(yīng)理解的是，所有這樣的變化是在本發(fā)明的范圍內(nèi)。盡管已經(jīng)參照特定的優(yōu)選的實(shí)施方式示出和描述了本發(fā)明，但應(yīng)理解的是，本領(lǐng)域技術(shù)人員在閱讀和理解了說明書后可以做出等同物和修改。本發(fā)明包括全部這樣的等同物和修改，并僅被下面的權(quán)利要求的范圍所限定。
權(quán)利要求
1.一種用于重新開始多媒體內(nèi)容回放以在電子裝置(10)上進(jìn)行顯示的方法，該方法包括: 從用戶輸入裝置(20)接收用于呈現(xiàn)多媒體內(nèi)容的命令，其中，所述多媒體內(nèi)容包括先前觀看的多媒體內(nèi)容和未觀看的多媒體內(nèi)容； 選擇所述先前觀看的多媒體內(nèi)容的一個或更多個片段； 在所述電子裝置的顯示器(18)上顯示與所選擇的一個或更多個片段相對應(yīng)的縮略圖，以提供所述先前觀看的內(nèi)容的可視摘要；并且 在所述顯示器上顯示至少一部分的所述可視摘要之后顯示所述未觀看的多媒體內(nèi)容的至少一部分。
2.根據(jù)權(quán)利要求1所述的方法，其中，基于片段選擇算法(14)來選擇所述一個或更多個片段。
3.根據(jù)權(quán)利要求1至2中任意一項(xiàng)所述的方法，其中，基于將所述先前觀看的多媒體內(nèi)容劃分為固定量的先前觀看的片段來選擇所述一個或更多個片段。
4.根據(jù)權(quán)利要求3所述的方法，其中，將各所述先前觀看的片段的一部分進(jìn)行聚合以形成所述一個或更多個片段。
5.根據(jù)權(quán)利要求1至4中任意一項(xiàng)所述的方法，其中，以拼貼畫格式在所述顯示器上呈現(xiàn)所選擇的一個或更多個片段各自的縮略圖。
6.根據(jù)權(quán)利要求5所述的方法，其中，基于所述先前觀看的內(nèi)容的時(shí)間次序以順序的方式呈現(xiàn)所選擇的一個或更多個片段各自的縮略圖。
7.根據(jù)權(quán)利要求 1至6中任意一項(xiàng)所述的方法，該方法還包括:接收用戶輸入以繞開所述可視摘要的至少一部分的顯示。
8.一種電子裝置(10)，該電子裝置包括: 存儲器(16)，用于存儲多媒體內(nèi)容和內(nèi)容回顧應(yīng)用(14)； 用戶輸入裝置(20)，用于接收用于呈現(xiàn)存儲在所述電子裝置上的多媒體內(nèi)容的命令，其中，所述多媒體內(nèi)容包括至少一個多媒體應(yīng)用，所述至少一個多媒體應(yīng)用包括先前觀看的多媒體內(nèi)容和未觀看的多媒體內(nèi)容； 處理器(32)，連接到所述用戶輸入裝置和所述存儲器，其中，所述處理器根據(jù)所述內(nèi)容回顧應(yīng)用對所述先前觀看的多媒體內(nèi)容進(jìn)行處理，以選擇一個或更多個片段來形成可視摘要，所述可視摘要包括與所述先前觀看的多媒體內(nèi)容的一個或更多個所選擇的片段相對應(yīng)的縮略圖；以及 顯示器(18)，連接到所述處理器，其中，所述顯示器在顯示所述未觀看的多媒體內(nèi)容的至少一部分之前將所述可視摘要呈現(xiàn)到關(guān)聯(lián)的電子裝置。
9.根據(jù)權(quán)利要求8所述的電子裝置，其中，所述電子裝置是移動電話。
10.根據(jù)權(quán)利要求8至9中任意一項(xiàng)所述的電子裝置，其中，所述用戶輸入裝置是鍵盤。
11.根據(jù)權(quán)利要求8至10中任意一項(xiàng)所述的電子裝置，其中，所述用戶輸入裝置是觸摸屏。
12.根據(jù)權(quán)利要求8至11中任意一項(xiàng)所述的電子裝置，其中，所述內(nèi)容回顧應(yīng)用基于片段選擇算法(14)來處理所述先前觀看的多媒體內(nèi)容。
13.根據(jù)權(quán)利要求8至12中任意一項(xiàng)所述的電子裝置，其中，基于將所述先前觀看的多媒體內(nèi)容劃分為固定量的先前觀看的片段來選擇所述一個或更多個片段。
14.根據(jù)權(quán)利要求13所述的電子裝置，其中，將針對各所述先前觀看的片段的縮略圖進(jìn)行累積以形成所述可視摘要。
15.根據(jù)權(quán)利要求8至14中任意一項(xiàng)所述的電子裝置，其中，所述可視摘要是呈現(xiàn)在所述顯示器上的拼貼畫，其中，所述拼貼畫包括與所選擇的一個或更多個片段的每一個相關(guān)聯(lián)的縮略圖。
16.根據(jù)權(quán)利要求15所述的電子裝置，其中，至少一個縮略圖與所選擇的片段的視頻剪輯相關(guān)聯(lián)。
17.根據(jù)權(quán)利要求8至16中任意一項(xiàng)所述的電子裝置，其中，所述可視摘要包括基于先前觀看的內(nèi)容的時(shí)間次序以順序的方式呈現(xiàn)所選擇的一個或更多個片段各自的縮略圖。
18.根據(jù)權(quán)利要求8至17中任意一項(xiàng)所述的電子裝置，其中，所述可視摘要包括嵌入在所述可視摘要內(nèi)的一個或更多個廣告。
19.根據(jù)權(quán)利要求8至18中任意一項(xiàng)所述的電子裝置，其中，所述可視摘要包括處于所述可視摘要中的一個或更多個產(chǎn)品位置索引。
全文摘要
一種用于重新開始多媒體內(nèi)容回放以在電子裝置上進(jìn)行顯示的方法(100)和電子裝置(10)。該方法包括從用戶輸入裝置(20)接收命令以表現(xiàn)多媒體內(nèi)容，其中，所述多媒體內(nèi)容包括先前觀看的多媒體內(nèi)容和未觀看的多媒體內(nèi)容；選擇先前觀看的多媒體內(nèi)容的一個或更多個片段；在所述電子裝置的顯示器(18)上顯示與所選擇的一個或更多個片段相對應(yīng)的縮略圖，以提供所述先前觀看的內(nèi)容的可視摘要；并且在所述顯示器上顯示至少一部分的所述可視摘要之后顯示所述未觀看的多媒體內(nèi)容的至少一部分。
文檔編號G06F17/30GK103168297SQ201080069709
公開日2013年6月19日 申請日期2010年10月19日 優(yōu)先權(quán)日2010年10月19日
發(fā)明者大衛(wèi)·德利昂, B·林德伯格, J·馬騰森 申請人:索尼愛立信移動通訊有限公司