本申請基于并要求于2015年7月15日提交至韓國知識產(chǎn)權(quán)局的第10-2015-0100518號韓國專利申請的優(yōu)先權(quán),該韓國專利申請的公開內(nèi)容通過完全引用并入本文。
技術(shù)領(lǐng)域
本公開涉及圖像顯示裝置及操作該圖像顯示裝置的方法,而且,例如涉及能夠存儲將要在圖像顯示裝置中再現(xiàn)的視頻的、圖像顯示裝置及操作該圖像顯示裝置的方法。
背景技術(shù):
圖像顯示裝置具有顯示能夠被用戶觀看的圖像的功能。用戶可以通過圖像顯示裝置觀看廣播。圖像顯示裝置顯示廣播,該廣播是由用戶在顯示器上從廣播站所發(fā)送的廣播信號之中選擇的。目前,全世界都趨于將廣播從模擬廣播轉(zhuǎn)換成數(shù)字廣播。
數(shù)字廣播是傳輸數(shù)字視頻和音頻信號的廣播。相比模擬廣播,數(shù)字廣播抵抗外部噪聲影響,并因此幾乎沒有數(shù)據(jù)損失,在糾錯上具有優(yōu)勢,并具有高分辨率,而且提供清晰的屏幕。此外,數(shù)字廣播與模擬廣播的不同之處在于,在數(shù)字廣播中能夠進行雙向服務。
此外,最近,智能電視(TV)設(shè)置為除了提供數(shù)字廣播功能之外,還提供各種類型的內(nèi)容。智能TV并非根據(jù)用戶的選擇被手動地操作,而是旨在分析用戶希望的操作以提供分析結(jié)果,而無需用戶執(zhí)行任何操作。
技術(shù)實現(xiàn)要素:
一種圖像顯示裝置及操作該圖像顯示裝置的方法被提供,而且其 能夠基于檢測到用戶面部表情的改變的時間點而存儲將要再現(xiàn)的視頻。
在下面的描述中將對附加的方面進行部分闡述,而且部分將從描述中顯而易見。
根據(jù)示例性實施方式,一種圖像顯示裝置包括:照相機,配置為捕捉用戶面部圖像;顯示器,配置為顯示當前在圖像顯示裝置中再現(xiàn)的視頻;以及控制器,配置為根據(jù)在進入個人視頻記錄(PVR)模式時捕捉的用戶面部圖像來檢測面部表情的改變,并在檢測到面部表情的改變時,將從第一時間點到第二時間點將要再現(xiàn)的視頻存儲在存儲單元中,所述第一時間點為檢測到面部表情的改變的時間點之前的時間點,以及所述第二時間點為檢測到面部表情的改變的時間點之后的時間點。
根據(jù)示例性實施方式,圖像顯示裝置還可以包括檢測電路,檢測電路配置為檢測用于選擇PVR模式的輸入,其中,控制器配置為在檢測到用于選擇PVR模式的輸入時,進入PVR模式。
根據(jù)示例性實施方式,檢測電路可以配置為檢測用于設(shè)置從第一時間點到第二時間點的時間段的輸入。
根據(jù)示例性實施方式,存儲單元可以在進入PVR模式時,順序地臨時存儲從PVR模式的進入時間點開始將要再現(xiàn)的預定數(shù)量的幀。
根據(jù)示例性實施方式,控制器可以配置為通過將預先存儲的第一面部圖像與由照相機捕捉的第二面部圖像進行比較來檢測面部表情的改變。
根據(jù)示例性實施方式,控制器可以配置為通過將第一面部圖像與第二面部圖像進行比較來檢測面部表情的改變,其中第一面部圖像通過在進入PVR模式時捕捉面部圖像而獲取,以及第二面部圖像通過在進入PVR模式之后定期捕捉面部圖像而獲取。
根據(jù)示例性實施方式,控制器可以配置為在存儲單元中存儲與存儲的視頻對應的音頻。
根據(jù)示例性實施方式,控制器可以配置為在存儲單元中存儲在從第一時間點到第二時間點將要再現(xiàn)的視頻中包括的幀中的一些幀。
根據(jù)示例性實施方式,顯示器可以配置為顯示指示存儲的視頻的圖標。
根據(jù)示例性實施方式,圖標可以包括以下至少之一:在檢測到用戶面部表情的改變的時間點捕捉的用戶面部圖像;以及指示存儲的視頻的縮略圖。
根據(jù)示例性實施方式,圖像顯示裝置還可以包括檢測電路,檢測電路配置為檢測用于選擇圖標的輸入,其中,控制器配置為在檢測到用于選擇圖標的輸入時,再現(xiàn)與圖標對應的視頻。
根據(jù)示例性實施方式,一種操作圖像顯示裝置的方法包括:顯示當前在圖像顯示裝置中再現(xiàn)的視頻;進入PVR模式;捕捉用戶面部圖像;根據(jù)捕捉到的用戶面部圖像檢測面部表情的改變;以及在檢測到面部表情的改變時,存儲從第一時間點到第二時間點將要再現(xiàn)的視頻,第一時間點為檢測到面部表情的改變的時間點之前的時間點,以及第二時間點為檢測到面部表情的改變的時間點之后的時間點。
根據(jù)示例性實施方式,進入可以包括:檢測用于選擇PVR模式的輸入;以及在檢測到用于選擇PVR模式的輸入時,進入PVR模式。
根據(jù)示例性實施方式,進入還可以包括:檢測用于設(shè)置從第一時間點到第二時間點的時間段的輸入。
根據(jù)示例性實施方式,操作圖像顯示裝置的方法還可以包括:在進入PVR模式時,順序地臨時存儲從PVR模式的進入時間點開始將要再現(xiàn)的預定數(shù)量的幀。
根據(jù)示例性實施方式,檢測可以包括:通過將預先存儲的第一面部圖像與由照相機捕捉的第二面部圖像進行比較來檢測面部表情的改變。
根據(jù)示例性實施方式,檢測可以包括:通過將第一面部圖像與第二面部圖像進行比較來檢測面部表情的改變,其中第一面部圖像通過在進入PVR模式時捕捉面部圖像而獲取,以及第二面部圖像通過在進入PVR模式之后定期捕捉面部圖像而獲取。
根據(jù)示例性實施方式,操作圖像顯示裝置的方法還可以包括:在存儲單元中存儲與存儲的視頻對應的音頻。
根據(jù)示例性實施方式,存儲可以包括:在存儲單元中存儲在從第一時間點到第二時間點將要再現(xiàn)的視頻中包括的幀中的一些幀。
根據(jù)示例性實施方式,操作圖像顯示裝置的方法還可以包括:顯示指示存儲的視頻的圖標。
根據(jù)示例性實施方式,操作圖像顯示裝置的方法還可以包括:檢測用于選擇圖標的輸入;以及在檢測到用于選擇圖標的輸入時,再現(xiàn)與圖標對應的視頻。
根據(jù)示例性實施方式,因為基于檢測到用戶面部表情的改變的時間點將要再現(xiàn)的視頻被存儲為個人視頻,所以能夠存儲用戶真正喜歡的視頻,而非僅僅觀看過的視頻。
基于檢測到用戶面部表情的改變的時間點將要再現(xiàn)的視頻可以與其他用戶共享,例如,從而視頻能夠用作與其他用戶的會話材料。
附圖說明
通過下面結(jié)合附圖進行的詳細描述,上述和/或其它方面將變得顯而易見且更易于理解,在附圖中,相同的參考數(shù)字指代相同的元件,并且其中:
圖1是示出示例性圖像顯示裝置和示例性控制設(shè)備的圖;
圖2是示出示例性圖像顯示裝置的示例性配置的框圖;
圖3是示出示例性圖像顯示裝置的示例性配置的框圖;
圖4是示出存儲在圖3的存儲單元190中的軟件的示例性配置的圖;
圖5是示出控制設(shè)備的示例性配置的框圖;
圖6是示出在顯示器上顯示的用于進入PVR模式的示例性菜單的圖;
圖7是示出圖像顯示裝置在PVR模式下操作的示例性方法的圖;
圖8是示出圖像顯示裝置在PVR模式下操作的示例性方法的圖;
圖9是示出圖像顯示裝置檢測面部表情的改變的示例性方法的圖;
圖10是示出在檢測到面部表情的改變時,圖像顯示裝置記錄視頻的示例性方法的圖;
圖11和12是示出在PVR模式下顯示通知消息的示例的圖;
圖13是示出顯示個人視頻列表的示例的圖;
圖14是示出圖像顯示裝置通過服務器共享個人視頻的示例的圖;以及
圖15是示出操作圖像顯示裝置的示例性方法的流程圖。
具體實施方式
現(xiàn)在,將更詳細地參考示例性實施方式,示例性實施方式的示例在附圖中示出,其中,相同的參考數(shù)字始終指代相同的元件。示例性實施方式可以具有不同的形式,并且不應解釋為限于本文闡述的描述。因此,下面僅通過參照附圖描述示例性實施方式,以對諸多方面進行解釋。如在本文中所使用的,術(shù)語“和/或”包括相關(guān)列出的項中的一個或多個的任何和全部組合。諸如“……中的至少一個”的表述在一列元件之后時,修飾整列元件,而非修飾該列中的單獨的元件。
將簡略地描述在本公開中使用的術(shù)語,而且將參照各示例更詳細地描述本公開。
雖然鑒于在示例性實施方式中的功能而選擇目前廣泛使用的普通術(shù)語,但是根據(jù)本領(lǐng)域的普通技術(shù)人員的意圖、先例、新技術(shù)的出現(xiàn)等,這些普通術(shù)語可以改變。由申請人任意選擇的術(shù)語也可用于特定情況。例如,可以在詳細的描述中給出它們的意思。因此,術(shù)語可以基于它們的意思和整個公開的內(nèi)容進行定義,而非通過簡單地敘述這些術(shù)語而進行定義。
將理解的是,術(shù)語“包括(comprises)”和/或“包括(comprising)”或“包括(includes)”和/或“包括(including)”在用于本公開時,指明敘述的元件的存在,但是并不排除一個或多個其它元件的存在或附加。在說明書中敘述的諸如“單元”和“模塊”的術(shù)語指的是處理至少一個功能或操作的單元,而且這些單元可以通過使用硬件(例如,電路)、軟件或硬件和軟件的組合實現(xiàn)。
將參照附圖詳細地描述本公開的示例性實施方式。然而,本公開可以以各種不同的形式實現(xiàn),而且不限于本文所闡述的示例。為了清楚地描述本公開,將省略對于不直接涉及本公開的功能和元件的描述。 貫穿附圖,相同的參考數(shù)字指代相同的元件。
圖1是示出示例性圖像顯示裝置和示例性控制設(shè)備的圖。
如圖1所示,圖像顯示裝置100可以為TV,但這僅僅是示例,而且圖像顯示裝置100可以被實現(xiàn)成包括顯示單元(例如,顯示器)的電子裝置。例如,圖像顯示裝置100可以通過各種電子裝置實現(xiàn),諸如移動電話、平板PC、數(shù)碼相機、攝像機、手提電腦、臺式計算機、電子書終端、數(shù)字廣播終端、個人數(shù)字助理(PDA)、便攜式多媒體播放器(PMP)、導航裝置、MPEG-1音頻層3(MP3)播放器以及可穿戴設(shè)備等。例如,示例性實施方式可以以具有大尺寸顯示器的顯示裝置容易地實現(xiàn),但不限于此。此外,圖像顯示裝置100可以為固定式或移動式,而且可以為能夠接收數(shù)字廣播的數(shù)字廣播接收器等。
圖像顯示裝置100可以例如實現(xiàn)為曲面顯示裝置或曲率可調(diào)整的柔性顯示裝置,以及平板顯示裝置,其中曲面顯示裝置是具有曲率的屏幕。圖像顯示裝置100的輸出分辨率例如可以包括高清晰度(HD)、全HD、超HD、或比超HD更清晰的分辨率。
圖像顯示裝置100可以例如包括照相機132a。照相機132a可以處理諸如由圖像傳感器獲取的靜態(tài)圖像或動態(tài)圖像的圖像幀。當存在請求時或定期地,照相機132a可以通過捕捉用戶面部圖像獲取用戶面部圖像。根據(jù)示例性實施方式,在接收到進入PVR模式的命令時,圖像顯示裝置100可以控制照相機132a捕捉用戶面部圖像。
照相機132a可以例如位于圖像顯示裝置100的頂部,從而可以捕捉用戶的面部,但不限于此。照相機132a的安裝位置可以由圖像顯示裝置的設(shè)計者或用戶多樣化地改變。
在本公開的示例性實施方式中,術(shù)語“用戶”可以例如指的是使用控制設(shè)備200控制圖像顯示裝置100的功能或操作的人,而且可以包括觀看者、管理者或安裝工程師等。
控制設(shè)備200可以例如實現(xiàn)為用于控制圖像顯示裝置100的各種類型的裝置,諸如遠程控制設(shè)備和移動電話等。
控制設(shè)備200可以配置成使用包括例如紅外線或藍牙通信的短距離通信控制圖像顯示裝置100??刂圃O(shè)備200可以例如使用所提供的按 鍵(包括按鈕)、觸摸板、能夠接收用戶語音的麥克風(未示出)以及能夠識別控制設(shè)備200的動作的傳感器(未示出)中的至少一個控制圖像顯示裝置100的功能。
控制設(shè)備200包括用于接通或斷開圖像顯示裝置100的電源的電源開/關(guān)(ON/OFF)按鈕??刂圃O(shè)備200還可以配置成根據(jù)用戶的輸入執(zhí)行頻道改變、音量調(diào)整、地面廣播/有線廣播/衛(wèi)星廣播選擇或環(huán)境設(shè)置。
根據(jù)示例性實施方式,圖像顯示裝置100可以使用控制設(shè)備200檢測用于選擇PVR模式的用戶輸入和用于設(shè)置PVR時間的用戶輸入。
另外,控制設(shè)備200可以例如為定位裝置。例如,控制設(shè)備200可以在接收到特定的按鍵輸入時作為定位裝置操作。
可以通過水平地或垂直地移動控制設(shè)備200或者使控制設(shè)備200沿任何方向傾斜的用戶輸入,控制圖像顯示裝置100。與通過控制設(shè)備200的傳感器檢測到的控制設(shè)備200的動作相關(guān)的信息可以傳輸至圖像顯示裝置100。圖像顯示裝置100可以根據(jù)與控制器200的動作相關(guān)的信息確定顯示器上的光標的坐標,而且可以與確定的坐標對應地移動光標。因此,圖像顯示裝置100的顯示器上的光標可以移動,而且可以激活在顯示器上顯示的各種菜單。
當控制設(shè)備200包括觸摸板時,基于例如在觸摸板上移動的諸如用戶的手指的對象的位移值,圖像顯示裝置100的顯示器上的光標可以移動而且可以選擇性地激活在顯示器上顯示的各種菜單。
圖2是示出示例性圖像顯示裝置的示例性配置的框圖。圖像顯示裝置100a可以為圖1的圖像顯示裝置100的一個示例。
參照圖2,根據(jù)示例性實施方式的圖像顯示裝置100a可以包括照相機單元(例如,照相機)132、控制單元(例如,控制器)110、顯示單元(例如,顯示器)120以及存儲單元(例如,存儲器)190。
照相機單元132可以包括例如鏡頭(未示出)和圖像傳感器(未示出),而且照相機單元132可以包括圖1中示出的照相機132a。照相機單元132可以例如使用多個鏡頭和圖像處理支持光學變焦和數(shù)字變焦。照相機單元132的識別范圍可以基于照相機的角度和環(huán)境情況不同地設(shè)置。當照相機單元132包括多個照相機時,能夠使用多個照相機接收 三維(3D)靜態(tài)圖像或3D動作。
根據(jù)示例性實施方式的照相機單元132可以在圖像顯示裝置100a進入PVR模式時捕捉用戶面部圖像。照相機單元132可以將捕捉的用戶面部圖像輸出到控制單元(例如,控制器)110。
另外,照相機單元132在照相機的識別范圍內(nèi)接收與包括姿勢在內(nèi)的用戶的動作對應的圖像(例如,連續(xù)幀)。例如,照相機單元132的識別范圍可以為從照相機單元132到用戶的距離在約0.1m至5m的范圍內(nèi)。用戶的動作例如可以包括用戶的身體的一部分的動作,諸如用戶的面部、面部表情、手、拳頭以及手指。照相機單元132在控制單元(例如,控制器)110的控制下,將接收到的圖像轉(zhuǎn)換成電信號,以將該電信號輸出至控制單元110。
控制單元110可以配置成使用接收到的動作識別結(jié)果,選擇在圖像顯示裝置100a上顯示的菜單或執(zhí)行與動作識別結(jié)果對應的控制。例如,該控制可以包括頻道調(diào)整、音量調(diào)整、指示器移動、以及光標移動等。
照相機單元132可以例如與圖像顯示裝置100a集成或分離。包括分離的照相機單元132的獨立裝置(未示出)可以通過通信電路或輸入/輸出單元電連接至圖像顯示裝置100a。
顯示單元120通過轉(zhuǎn)換在控制單元110中處理的圖像信號、數(shù)據(jù)信號、屏幕顯示(OSD)信號、控制信號等生成驅(qū)動信號。顯示單元120可以實現(xiàn)為等離子顯示面板(PDP)、液晶顯示器(LCD)、有機發(fā)光二極管(OLED)顯示器或柔性顯示器,或者可以實現(xiàn)為3D顯示器。另外,顯示單元120可以配置成觸摸屏,而且除了可以用作輸出單元之外,還可以用作輸入單元。
根據(jù)示例性實施方式的顯示單元120可以顯示當前在圖像顯示裝置100a中再現(xiàn)的視頻。在PVR模式運行時,顯示單元120可以顯示各種通知消息。顯示單元120可以顯示指示存儲的視頻的圖標,而且該圖標可以例如包括以下項中的至少一個:在檢測到面部表情的改變的時間點捕捉的用戶面部圖像;和指示存儲的視頻的縮略圖。
控制單元110可以配置成處理圖像信號并將處理后的圖像信號輸入到顯示單元120。在顯示單元120上可以顯示與圖像信號對應的圖像。 另外,控制單元110可以配置成基于接收到的用戶命令或內(nèi)部程序控制圖像顯示裝置100a。
根據(jù)示例性實施方式的控制單元110可以配置成根據(jù)從照相機單元132接收的用戶面部圖像檢測面部表情的改變??刂茊卧?10可以配置成通過將預先存儲的用戶的第一面部圖像與由照相機單元132捕捉的用戶的第二面部圖像進行比較,檢測面部表情的改變。控制單元110可以配置成通過將在進入PVR模式時捕捉的用戶的第一面部圖像與在進入PVR模式之后定期捕捉的用戶的第二面部圖像進行比較,檢測面部表情的改變。然而,示例性實施方式并不限于此。
當檢測到面部表情的改變時,控制單元110可以配置成在存儲單元190中存儲從檢測到面部表情的改變的時間點之前的第一時間點到檢測到面部表情的改變的時間點之后的第二時間點將要再現(xiàn)的視頻。
存儲單元190可以在控制單元110的控制下,存儲用于驅(qū)動和控制圖像顯示裝置100a的各種數(shù)據(jù)、程序或應用。
存儲單元190可以存儲用于圖像顯示裝置100a且用以控制控制單元的控制程序、由制造商初始提供的或從外部下載的應用、與應用相關(guān)的圖形用戶界面(GUI)、用于提供GUI的對象(例如,圖像、文本、圖標、按鈕等)、用戶信息、文檔、數(shù)據(jù)庫(DB)或相關(guān)數(shù)據(jù)。
根據(jù)示例性實施方式的存儲單元190可以在進入PVR模式時,順序地臨時存儲從PVR模式的進入時間點開始將要再現(xiàn)的預定數(shù)量的幀。在檢測到面部表情的改變的時間點之前再現(xiàn)的視頻幀也可以作為個人視頻進行存儲。
圖3是示出示例性圖像顯示裝置的示例性配置的框圖。圖3的圖像顯示裝置100b可以為圖1的圖像顯示裝置100的示例。
參照圖3,根據(jù)示例性實施方式的圖像顯示裝置100b除了包括照相機單元(例如,照相機)132、控制單元(例如,控制器)110、顯示單元(例如,顯示器)120以及存儲單元(例如,存儲器)190之外,還可以包括視頻處理單元(例如,視頻處理器)180、音頻處理單元(例如,音頻處理器)115、音頻輸出單元125、電力單元160、調(diào)諧器140、通信單元(例如,通信電路)150、檢測單元130以及輸入/輸出單元170。
因為照相機單元132、控制單元110、顯示單元120以及存儲單元190與參照圖2所描述的那些單元相似,所以將從圖3的描述中省略其相同的內(nèi)容。
視頻處理單元(例如,視頻處理器)180執(zhí)行對通過圖像顯示裝置100b接收的視頻數(shù)據(jù)的處理。視頻處理單元180可以執(zhí)行各種類型的圖像處理,諸如對于視頻數(shù)據(jù)的解碼、縮放、噪聲過濾、幀率轉(zhuǎn)換、以及分辨率轉(zhuǎn)換。
顯示單元(例如,顯示器)120在控制單元110的控制下,在屏幕上顯示包括在通過調(diào)諧器140接收的廣播信號中的視頻。另外,顯示單元120可以顯示通過通信單元150或輸入/輸出單元170輸入的內(nèi)容(例如,視頻)。顯示單元120可以在控制單元110的控制下,輸出存儲在存儲單元190中的圖像。另外,顯示單元120可以顯示語音用戶界面(UI)(例如,包括語音命令指南)和動作UI(例如,包括用于動作識別的用戶動作指南),其中語音用戶界面(UI)用于執(zhí)行與語音識別對應的語音識別任務,動作UI用于執(zhí)行與動作識別對應的動作識別任務。
音頻處理單元(例如,音頻處理器)115處理音頻數(shù)據(jù)。音頻處理單元115可以對音頻數(shù)據(jù)執(zhí)行各種處理,諸如解碼、放大以及噪聲過濾。音頻處理單元115可以包括多個音頻處理模塊,以用于處理與多個內(nèi)容塊對應的音頻數(shù)據(jù)。
音頻輸出單元125在控制單元110的控制下,輸出包括在通過調(diào)諧器140接收的廣播信號中的音頻信號。音頻輸出單元125可以輸出通過通信單元150或輸入/輸出單元170輸入的音頻信號(例如,語音和聲音)。音頻輸出單元125可以在控制單元110的控制下,輸出存儲在存儲單元190中的音頻信號。音頻輸出單元125可以例如包括揚聲器126、耳機輸出端口127以及索尼/飛利浦數(shù)字接口(S/PDIF)輸出端口128中的至少一個。音頻輸出單元125可以包括揚聲器126、耳機輸出端口127以及S/PDIF輸出端口128的組合。
電力單元160在控制單元110的控制下,向圖像顯示裝置100b的內(nèi)部組件供應從外部電源輸入的電力。另外,電力單元160可以在控制單元110的控制下,向內(nèi)部組件供應從位于圖像顯示裝置100b內(nèi)部的一個 或多個電池(未示出)輸出的電力。
根據(jù)放大、混合、共振等,調(diào)諧器140可以接收無線地或有線地接收到的廣播信號,并且僅調(diào)諧和選擇在廣播信號的多個無線電波成分之中希望通過圖像顯示裝置100b接收的頻道的頻率。該廣播信號包括音頻、視頻以及附加信息(例如,電子節(jié)目指南(EPG))。
調(diào)諧器140可以基于用戶的輸入(例如,從控制設(shè)備200接收的控制信號,例如,EPG屏幕中的頻道編號輸入、頻道上-下輸入以及頻道輸入)接收與頻道編號(例如,第506號有線廣播頻道)對應的頻帶中的廣播信號。
調(diào)諧器140可以從多個源接收廣播信號,諸如地面廣播、有線廣播、衛(wèi)星廣播以及網(wǎng)絡廣播等。調(diào)諧器140還可以從諸如數(shù)字廣播或模擬廣播的源接收廣播信號。通過調(diào)諧器140接收的廣播信號可以受到解碼(例如,音頻解碼、視頻解碼或附加信息解碼)并被分離成音頻、視頻和/或附加信息。在分離之后的音頻、視頻和/或附加信息可以在控制單元110的控制下,存儲在存儲單元190中。
圖像顯示裝置100b的調(diào)諧器140的數(shù)量可以為一個或多個。調(diào)諧器140可以與圖像顯示裝置100b以一體化形式實現(xiàn),或者可以通過具有電連接至圖像顯示裝置100b的調(diào)諧器(未示出)或連接至輸入/輸出單元170的調(diào)諧器(未示出)的獨立設(shè)備(例如,機頂盒(未示出))實現(xiàn)。
通信單元150可以在控制單元110的控制下,將圖像顯示裝置100b連接至外部設(shè)備(例如,音頻設(shè)備)??刂茊卧梢耘渲贸赏ㄟ^通信單元150,向外部設(shè)備傳輸內(nèi)容/從外部設(shè)備接收內(nèi)容、從外部設(shè)備下載應用、或執(zhí)行網(wǎng)頁瀏覽。根據(jù)圖像顯示裝置100b的性能和結(jié)構(gòu),通信單元150可以例如包括無線局域網(wǎng)(WLAN)單元151、藍牙單元152以及有線以太網(wǎng)單元153中的一個。通信單元150可以包括WLAN單元151、藍牙單元152以及以太網(wǎng)單元153的組合。通信單元150可以在控制單元110的控制下,接收控制設(shè)備200的控制信號??刂菩盘柨梢詫崿F(xiàn)為藍牙型、射頻(RF)信號型、或無線保真(Wi-Fi)型。
例如,通信單元150可以配置成通過藍牙單元152的通信,從控制設(shè)備200接收藍牙型的、與用戶的輸入(例如,觸摸、按壓、觸摸手勢、 語音或動作)對應的信號。通信單元150除了包括藍牙之外,還可以包括短距離通信(例如,近場通信(NFC)(未示出)或藍牙低功耗(BLE)(未示出))。
檢測單元130檢測用戶的語音、用戶的圖像、或用戶的交互,而且可以包括麥克風131、照相機單元132以及光接收單元133。因為照相機單元132具有與圖2的照相機單元相同的配置,所以將省略其詳細描述。
麥克風131接收用戶說出的聲音。麥克風131可以將接收到的話語轉(zhuǎn)換成電信號,并將該電信號輸出到控制單元110。用戶的話語例如可以包括與圖像顯示裝置100b的菜單或功能對應的話語。建議麥克風131的識別范圍為例如從麥克風131到用戶的位置在約4m內(nèi)。麥克風131的識別范圍可以根據(jù)用戶的聲音水平和周圍環(huán)境(例如,來自揚聲器的聲音或環(huán)境噪音)而不同。
根據(jù)示例性實施方式,麥克風131可以接收用戶說出的聲音,并將接收到的聲音等數(shù)據(jù)輸出到控制單元110,從而控制單元110可以使用聲音數(shù)據(jù)識別觀看圖像顯示裝置100b的用戶的身份。
麥克風131可以例如實現(xiàn)為與圖像顯示裝置100b集成或與圖像顯示裝置100b分離。分離的麥克風131可以通過通信單元150或輸入/輸出單元170電連接至圖像顯示裝置100b。
本領(lǐng)域技術(shù)人員將容易地理解的是,基于圖像顯示裝置100b的性能和結(jié)構(gòu),可以省略麥克風131。
光接收單元133通過位于顯示單元120的遮光板中的光窗口(未示出)接收從外部控制設(shè)備200接收到的光信號(包括控制信號)。光接收單元133可以從控制設(shè)備200接收與用戶的輸入(例如,觸摸、按壓、觸摸手勢、語音或動作)對應的光信號。在控制單元110的控制下,可以從接收到的光信號提取控制信號。
輸入/輸出單元170在控制單元110的控制下,從圖像顯示裝置100b的外部接收視頻(例如,動態(tài)圖像等)、音頻(例如,語音、音樂等)、附加信息(例如,EPG等)等。輸入/輸出單元170可以包括高清晰度多媒體接口(HDMI)端口171、組件插口172、PC端口173以及通用串行總線(USB)端口174中的一個。輸入/輸出單元170可以包括HDMI 端口171、組件插口172、PC端口173以及USB端口174的組合。
本領(lǐng)域技術(shù)人員將容易地理解的是,輸入/輸出單元170的配置和操作可以以各種方式實現(xiàn)。
控制單元110配置為控制圖像顯示裝置100b的整體操作和圖像顯示裝置100b的內(nèi)部組件之間的信號流,而且配置為執(zhí)行處理數(shù)據(jù)的功能。當存在用戶的輸入或滿足預設(shè)的存儲的條件時,控制單元110可以配置為執(zhí)行存儲在存儲單元190中的OS和各種應用。
控制單元110可以例如包括隨機存取存儲器(RAM)181、只讀存儲器(ROM)182以及處理器183,其中RAM181存儲從圖像顯示裝置100b的外部輸入的信號或數(shù)據(jù)并用作與在圖像顯示裝置100b中將要執(zhí)行的各種操作對應的存儲區(qū)域,ROM182存儲用于控制圖像顯示裝置100b的控制程序。
處理器183可以包括圖形處理單元(GPU)(未示出),GPU用于與視頻對應的圖形處理。處理器183可以實現(xiàn)為片上系統(tǒng)(SoC),在片上系統(tǒng)(SoC)中集成了核心(未示出)和GPU(未示出)。處理器183可以包括單核心、雙核心、三核心、四核心等。
處理器183可以包括多個處理器。例如,處理器183可以實現(xiàn)為主處理器(未示出)和在休眠模式下可操作的子處理器(未示出)。
圖形處理單元184使用計算單元(未示出)和渲染單元(未示出)生成包括各種對象(諸如,圖標、圖像以及文本)的屏幕。計算單元使用通過檢測單元130檢測的用戶的輸入,根據(jù)屏幕的布局,計算諸如坐標值、形式、大小以及顏色的屬性值,其中對象以屬性值顯示。渲染單元基于由計算單元計算的屬性值生成包括對象的各種布局的屏幕。在顯示單元120的顯示區(qū)域內(nèi)顯示由渲染單元生成的屏幕。
第一接口185-1至第n接口185-n連接至上述各種組件。接口中的一個可以為通過網(wǎng)絡連接到外部設(shè)備的網(wǎng)絡接口。
RAM181、ROM182、處理器183、圖形處理單元184以及第一接口185-1至第n接口185-n可以通過內(nèi)部總線186互相連接。
在本示例性實施方式中,術(shù)語“圖像顯示裝置的控制單元”包括處理器183、ROM182以及RAM181,而且可以稱為控制器。
存儲單元190可以存儲輸入/輸出信號或數(shù)據(jù),該輸入/輸出信號或數(shù)據(jù)對應于驅(qū)動視頻處理單元180、顯示單元120、音頻處理單元115、音頻輸出單元125、電力單元160、調(diào)諧器140、通信單元150、檢測單元130以及輸入/輸出單元170。
在示例性實施方式中,術(shù)語“存儲單元”可以指的是安裝在圖像顯示裝置100b中的存儲單元190、控制單元的ROM182或RAM181、或存儲卡(例如,微型安全數(shù)字(SD)卡或USB存儲器(未示出))。存儲單元190可以包括非易失性存儲器、易失性存儲器、硬盤驅(qū)動器(HDD)或固態(tài)驅(qū)動器(SSD)。
雖然未示出,但是存儲單元190可以包括廣播接收模塊、頻道控制模塊、音量控制模塊、通信控制模塊、語音識別模塊、動作識別模塊、光接收模塊、顯示控制模塊、音頻控制模塊、外部輸入控制模塊、電力控制模塊、無線地(例如,藍牙)連接的外部設(shè)備的電力控制模塊、語音DB、或動作DB。存儲單元190的模塊和DB(未示出)可以以用于執(zhí)行圖像顯示裝置100b中的以下功能的軟件的形式實現(xiàn):廣播接收控制功能、頻道控制功能、音量控制功能、通信控制功能、語音識別功能、動作識別功能、光接收控制功能、顯示控制功能、音頻控制功能、外部輸入控制功能、電力控制功能、或無線地(例如,通過藍牙)連接的外部設(shè)備的電力控制功能。控制單元110可以使用存儲在存儲單元190中的軟件執(zhí)行每個功能。
具有顯示單元120的圖像顯示裝置100b可以電連接至獨立外部設(shè)備(例如,機頂盒(未示出))。例如,圖像顯示裝置100b可以通過模擬TV、數(shù)字TV、3D TV、智能TV、發(fā)光二極管(LED)TV、OLED TV、等離子TV或監(jiān)視器實現(xiàn),但是本領(lǐng)域技術(shù)人員將容易地理解的是,圖像顯示裝置100b不限于此。
圖像顯示裝置100b可以包括傳感器(例如,照度傳感器、溫度傳感器等)(未示出),以用于檢測圖像顯示裝置100b的內(nèi)部狀態(tài)或外部狀態(tài)。
圖2和圖3中示出的圖像顯示裝置100a和100b的框圖僅為示例。根據(jù)實際要實現(xiàn)的圖像顯示裝置100的規(guī)格,可以對每個框圖的組件進行 集成、添加或省略。例如,如果需要的話,可以將兩個或更多個組件集成為單個組件,或者可以將一個組件拆分成兩個或更多個組件。另外,在方框中將要執(zhí)行的功能是用于描述示例性實施方式,而且它們的詳細操作和設(shè)備不會限制本公開的范圍。
圖4是示出存儲在圖3的存儲單元190中的軟件的示例性配置的圖。
參照圖4,存儲單元190可以存儲軟件,包括基礎(chǔ)模塊191、感測模塊192、通信模塊193、展示模塊194、網(wǎng)絡瀏覽器模塊195以及服務模塊196。
基礎(chǔ)模塊191處理從包括在圖像顯示裝置100中的硬件傳遞來的信號,并將處理后的信號傳遞至高階層的模塊?;A(chǔ)模塊191可以包括存儲模塊191-1、安全模塊191-2、網(wǎng)絡模塊191-3等。存儲模塊191-1可以包括用于管理DB或注冊的程序模塊。處理器183可以使用存儲模塊191-1訪問存儲單元190內(nèi)的DB,以讀取各種類型的數(shù)據(jù)。安全模塊191-2可以例如為用于支持認證、許可、安全存儲等的程序模塊。另外,網(wǎng)絡模塊191-3包括域網(wǎng)絡(DNET)模塊、通用即插即用(UPnP)模塊等作為用于支持網(wǎng)絡連接的模塊。
感測模塊192可以例如為用于從各種類型的傳感器收集信息并對收集到的信息進行分析和管理的模塊。感測模塊192可以包括頭部方向識別模塊、面部識別模塊、語音識別模塊、動作識別模塊、NFC識別模塊等。
通信模塊193可以例如為用于執(zhí)行與外部通信的模塊。通信模塊193可以包括信息模塊193-1和電話模塊193-2,其中信息模塊193-1為諸如聊天程序、短消息服務(SMS)&多媒體消息服務(MMS)程序或電子郵件程序,電話模塊193-2包括呼叫信息整合器程序模塊、互聯(lián)網(wǎng)協(xié)議電話(VoIP)模塊等。
展示模塊194可以例如為用于配置顯示屏的模塊。展示模塊194可以包括用于再現(xiàn)多媒體內(nèi)容以輸出再現(xiàn)的多媒體內(nèi)容的多媒體模塊194-1和用于執(zhí)行圖形處理的UI渲染模塊194-2。多媒體模塊194-1可以包括播放器模塊、攝像機模塊、聲音處理模塊等。因此,多媒體模塊194-1執(zhí)行再現(xiàn)各種類型的多媒體內(nèi)容的操作以生成并再現(xiàn)屏幕和聲 音。UI渲染模塊194-2可以包括用于合并圖像的圖像合成器模塊、用于合并其上顯示圖像的屏幕上的坐標并生成坐標組合的坐標合并模塊、用于從硬件接收各種事件的X11模塊、用于提供工具以配置2維(2D)或3D UI的2D/3D UI工具包等。
網(wǎng)絡瀏覽器模塊195可以例如為用于執(zhí)行網(wǎng)頁瀏覽以訪問網(wǎng)絡服務器的模塊。網(wǎng)絡瀏覽器模塊195可以包括各種模塊,諸如構(gòu)成網(wǎng)頁的網(wǎng)頁視圖模塊、用于執(zhí)行下載的下載代理模塊、書簽模塊以及網(wǎng)絡包模塊。
服務模塊196可以例如為包括用于提供各種服務的各種應用的模塊。例如,服務模塊196可以包括各種程序模塊,諸如社交網(wǎng)絡服務(SNS)程序、內(nèi)容再現(xiàn)程序、游戲程序、電子書程序、日歷程序、鬧鐘管理程序以及桌面小程序。
圖4中示出了各種程序組件,但是,當然,基于圖像顯示裝置100的類型和特性,可以省略圖4中示出的各種類型的程序模塊中的一些,而且可以修改或添加程序模塊。例如,程序模塊可以以以下形式實現(xiàn),即,進一步包括基于位置的模塊,以用于支持基于位置的服務(與諸如全球定位系統(tǒng)(GPS)芯片的硬件一致)。
圖5是示出控制設(shè)備的示例性配置的框圖。
參照圖5,控制設(shè)備200可以包括無線通信單元220、用戶輸入單元230、傳感器單元240、輸出單元250、電力單元260、存儲單元270以及控制單元(例如,控制器)280。
無線通信單元(例如,通信電路)220可以配置成向根據(jù)上述示例性實施方式的圖像顯示裝置中的任何一個傳輸信號,以及從根據(jù)上述示例性實施方式的圖像顯示裝置中的任何一個接收信號。無線通信單元220可以包括射頻(RF)模塊221,RF模塊221能夠根據(jù)RF通信標準向圖像顯示裝置100傳輸信號,以及從圖像顯示裝置100接收信號??刂圃O(shè)備200可以包括紅外線(IR)模塊,IR模塊能夠根據(jù)IR通信標準向圖像顯示裝置100傳輸信號,以及從圖像顯示裝置100接收信號。
在示例性實施方式中,控制設(shè)備200可以通過RF模塊221向圖像顯示裝置100傳輸包含與控制設(shè)備200的動作相關(guān)的信息的信號。
控制設(shè)備200可以通過RF模塊221接收通過圖像顯示裝置100傳輸?shù)男盘枴A硗?,如果需要的話,控制設(shè)備200可以通過IR模塊223向圖像顯示裝置100傳輸與電源ON/OFF、頻道改變、音量改變等相關(guān)的命令。
用戶輸入單元230可以包括鍵盤、按鈕、觸摸板、觸摸屏等。用戶可以通過操作用戶輸入單元230向控制設(shè)備200輸入與圖像顯示裝置100相關(guān)的命令。當用戶輸入單元230包括硬鍵按鈕時,用戶可以通過推動硬鍵按鈕的操作向控制設(shè)備200輸入與圖像顯示裝置100相關(guān)的命令。當用戶輸入單元230包括觸摸屏時,用戶可以通過觸摸觸摸屏的軟鍵向控制設(shè)備200輸入與圖像顯示裝置100相關(guān)的命令。
例如,用戶輸入單元230可以包括四個方向按鈕或按鍵。這四個方向按鈕或按鍵可以用于控制將要在顯示單元120上顯示的菜單、應用、項目等。這四個方向按鈕或按鍵可以用于指示向上移動、向下移動、向左移動以及向右移動。另外,本領(lǐng)域技術(shù)人員將理解的是,用戶輸入單元230可以包括兩個方向按鈕或按鍵,而非四個方向按鈕或按鍵。
用戶輸入單元230可以包括各種類型的輸入方式,用于使用戶能夠操作滾動鍵、控制鍵(jog key)等。
用戶輸入單元230可以包括觸摸板。根據(jù)示例性實施方式的用戶輸入單元230可以接收用戶通過手勢的輸入,該手勢包括例如在控制設(shè)備200的觸摸板上拖拉、觸摸或敲擊。基于接收到的用戶輸入的類型(例如,輸入拖拉命令的方向和輸入觸摸命令的時間)可以控制圖像顯示裝置100。
傳感器單元240可以例如包括陀螺儀傳感器241或加速度傳感器243。陀螺儀傳感器241可以感測與控制設(shè)備200的動作相關(guān)的信息。例如,陀螺儀傳感器241可以基于x軸、y軸以及z軸感測與控制設(shè)備200的操作相關(guān)的信息。加速度傳感器243可以感測與控制設(shè)備200的移動速度等相關(guān)的信息。還可設(shè)置距離測量傳感器,以感測到圖像顯示裝置100的距離。
輸出單元250可以輸出視頻或音頻信號,該視頻或音頻信號與用戶輸入單元230的操作對應,或與從圖像顯示裝置100接收的信號對應。 通過輸出單元250,用戶可以識別是否存在對用戶輸入單元230的操作或是否存在對圖像顯示裝置100的控制。
例如,輸出單元250可以包括LED模塊、用于生成振動的振動模塊、用于輸出聲音的聲音輸出模塊、或用于輸出圖像的顯示模塊,其中在操作用戶輸入單元230時或在通過無線通信單元220向圖像顯示裝置100傳輸信號或從圖像顯示裝置100接收信號時,LED模塊被打開。
電力單元260向控制設(shè)備200供應電力。電力單元260可以通過當控制設(shè)備200在預定時間未移動時停止供電來降低電力消耗。電力單元260可以在操作設(shè)置于控制設(shè)備200中的預定按鍵時恢復供電。
存儲單元270可以存儲控制或操作控制設(shè)備200所需的各種類型的程序、應用數(shù)據(jù)等。
控制單元280配置成控制與控制設(shè)備200的控制相關(guān)的各種操作??刂茊卧?80可以通過無線通信單元220,向圖像顯示裝置100傳輸與用戶輸入單元230的預定按鍵操作對應的信號或者通過傳感器單元240感測的、與控制設(shè)備200的動作對應的信號。
圖像顯示裝置100可以包括坐標值計算單元(未示出),該坐標值計算單元能夠確定與控制設(shè)備200的操作對應的光標的坐標值。
坐標值計算單元(未示出)可以修正裝置振動或來自與控制設(shè)備200的檢測到的操作對應的信號的誤差,以計算將要在顯示單元120上顯示的光標的坐標值(x,y)。
另外,從控制設(shè)備200傳輸來的、通過檢測單元130檢測的信號被傳輸至圖像顯示裝置100的控制單元110。控制單元110可以根據(jù)由控制設(shè)備200傳輸?shù)男盘栕R別與控制器200的操作和按鍵操作相關(guān)的信息,并根據(jù)識別的信息控制圖像顯示裝置100。
例如,控制設(shè)備200可以計算與操作對應的光標的坐標值,并將計算的坐標值傳輸至圖像顯示裝置100。例如,圖像顯示裝置100可以向控制單元110傳輸與在不存在獨立的裝置振動或誤差修正處理的情況下接收到的光標的坐標值相關(guān)的信息。
圖6是示出顯示進入PVR模式的菜單的示例的圖。
參照圖6,圖像顯示裝置100可以感測用戶的輸入,其中按壓包括 在控制設(shè)備200中的菜單鍵。對應于檢測到的用戶的輸入,圖像顯示裝置100可以在顯示單元120上顯示菜單(“menu”)屏幕310。然而,用于顯示菜單屏幕310的用戶的輸入不限于鍵按壓輸入。
菜單屏幕310可以包括菜單項。菜單項可以包括PVR項、屏幕(“screen”)項、聲音(“sound”)項、頻道/廣播(“channel/broadcast”)項、網(wǎng)絡(“network”)項、系統(tǒng)(“system”)項等。然而,菜單項不限于此。
顯示菜單屏幕310,而且圖像顯示裝置100可以使用控制設(shè)備200檢測用于選擇包括在菜單屏幕310中的菜單項中的任何一項的用戶的輸入。
如圖6所示,在選擇PVR項時,顯示單元120可以顯示與PVR相關(guān)的設(shè)置屏幕320。例如,能夠在設(shè)置屏幕320中設(shè)置PVR時間。PVR時間是以下時間,即當從用戶面部圖像檢測到面部表情的改變時,將要再現(xiàn)的視頻作為個人視頻進行記錄(存儲)。
例如,當記錄時間設(shè)置為“前后30秒”(“30seconds before and after”)時,基于檢測到用戶面部表情的改變的第一時間點,可以控制以存儲以下視頻,該視頻將要再現(xiàn)第一時間點之前的30秒和第一時間點之后的30秒。另外,當記錄時間設(shè)置為“前后1分鐘”(“1minute before and after”)時,基于檢測到用戶面部表情的改變的第一時間點,可以控制以存儲以下視頻,該視頻將要再現(xiàn)第一時間點之前的1分鐘和第一時間點之后的1分鐘。
在設(shè)置“用戶設(shè)置”(“user setting”)時,可以設(shè)置個人視頻的總記錄時間和在總記錄時間中檢測到用戶面部表情的改變的時間點的位置。因此,可以由用戶直接設(shè)置檢測到面部表情的改變的時間點之前的記錄時間和檢測到面部表情的改變的時間點之后的記錄時間。例如,當記錄時間(“recording time”)設(shè)置為1分30秒(“1minute and 30seconds”),并且檢測到面部表情的改變的時間點設(shè)置為與總記錄時間“1分30秒”中的00:00:20對應的位置時,圖像顯示裝置100可以存儲以下視頻,該視頻將要再現(xiàn)檢測到面部表情的改變的第一時間點之前的20秒和第一時間點之后的1分10秒。
圖7是示出圖像顯示裝置在PVR模式下操作的示例性方法的圖。
參照圖7,當進入PVR模式時,圖像顯示裝置100可以操作照相機132a以捕捉用戶的面部。
另外,顯示單元120可以顯示指示在PVR模式下操作的消息410。此時,消息410可以顯示在顯示單元120的預設(shè)區(qū)域中,而且可以按照預設(shè)循環(huán)進行顯示和不顯示,而非連續(xù)顯示。另外,圖像顯示裝置100可以配置成顯示消息410,從而消息410不基于用戶的輸入進行顯示。
根據(jù)示例性實施方式,顯示單元120顯示消息410以通知用戶圖像顯示裝置100正在PVR模式下操作。
圖8是示出圖像顯示裝置在PVR模式下操作的示例性方法的圖。
參照圖8,根據(jù)示例性實施方式的圖像顯示裝置100可以臨時存儲從進入PVR模式的時間開始將要再現(xiàn)的視頻。例如,圖像顯示裝置100可以順序地臨時存儲將要再現(xiàn)的預定數(shù)量的視頻幀。
如果臨時存儲的視頻幀的數(shù)量等于幀的預定數(shù)量,則在跟在最近存儲的視頻幀之后的下一視頻幀被存儲時,圖像顯示裝置100可以從存儲的視頻幀之中刪除第一存儲幀,并存儲下一視頻幀。
例如,在如圖8所示,存儲單元190臨時存儲7個幀時,順序地存儲從進入PVR模式的時間開始將要再現(xiàn)的7個幀510、520、530、540、550、560以及570(R1)。當再現(xiàn)跟在第七幀570之后的下一幀即第八幀580時,能夠刪除第一幀510,并存儲第八幀580(R2)。類似地,當再現(xiàn)第九幀590時,能夠刪除第二幀520,并存儲第九幀590(R3)。
此時,在存儲單元190中臨時存儲的幀的(預設(shè))數(shù)量大于或等于與圖6中設(shè)置的PVR時間對應的幀的數(shù)量。
圖9是示出圖像顯示裝置檢測用戶面部圖像中面部表情的改變的示例性方法的圖。
參照圖9,圖像顯示裝置100可以通過將用戶的第一面部圖像610與第二面部圖像620進行比較來檢測面部表情的改變。
例如,面部表情的改變可以通過將用戶無表情的面部圖像(第一面部圖像610)與由照相機捕捉的用戶面部圖像(第二面部圖像620)進行比較來檢測。此時,用戶無表情的面部圖像可以為由用戶預先存 儲的圖像。
圖像顯示裝置100可以通過以下方式檢測面部表情的改變,即,將在進入PVR模式時捕捉的用戶面部圖像(第一面部圖像610)與在進入PVR模式之后定期捕捉的用戶面部圖像(第二面部圖像620)進行比較。
圖像顯示裝置100可以基于例如來自用戶面部圖像的特定元素來檢測面部表情的改變。例如,從第一面部圖像610和第二面部圖像620獲取與兩眼之間的距離、眼睛大小(寬度)、嘴巴大小(長度)、臉部輪廓等相關(guān)的數(shù)據(jù),并基于特定元素,即在第二面部圖像中比在第一面部圖像中眼睛是否睜更大、眼睛是否更細、眼角是否更低、嘴巴是否張更大、嘴角是否更上翹等,可以檢測面部表情的改變。
圖像顯示裝置100可以基于特定元素確定檢測到的面部表情的改變的類型。例如,在檢測到面部表情的改變時,即在第二面部圖像620中比在第一面部圖像610中眼睛更細、眼角更低、而且嘴角更上翹時,可以確定面部表情的改變?yōu)槲⑿Ρ砬椤C娌勘砬榈母淖兊念愋统税ㄎ⑿Ρ砬橹?,還可以包括傷心表情、驚訝表情、害怕表情等。
圖10是示出在檢測到面部表情的改變時,圖像顯示裝置記錄視頻的示例性方法的圖。
參照圖10,圖像顯示裝置100可以存儲基于從用戶面部圖像檢測到面部表情的改變的時間點將要再現(xiàn)的視頻。例如,圖像顯示裝置100可以在存儲單元中存儲從檢測到面部表情的改變的時間點T’之前的第一時間點T1到檢測到面部表情的改變的時間點T”之后的第二時間點T2將要再現(xiàn)的視頻。
如參照圖6所描述的,可以由用戶預設(shè)從第一時間點T1到第二時間點T2的時間段T3。
例如,當用戶執(zhí)行設(shè)置從而記錄在檢測到用戶面部表情的改變的時間點T’之前的20秒和時間點T’之后的50秒將要再現(xiàn)的視頻時,圖像顯示裝置可以存儲包括在從比檢測到面部表情的改變的時間點T’早20秒的時間點T1到比檢測到面部表情的改變的時間點T’晚50秒的時間點T2將要再現(xiàn)的視頻中的幀710、720、730、740、750、760以及770。如圖10所示,圖像顯示裝置100可以例如存儲從第四幀710到第十幀770 的幀。
如圖10所示,圖像顯示裝置100可以從包括在從比檢測到面部表情的改變的時間點早20秒的時間點到比檢測到面部表情的改變的時間點晚50秒的時間點T2將要再現(xiàn)的視頻中的幀710、720、730、740、750、760以及770之中采集并存儲一些幀710、730、750以及770。
圖像顯示裝置100可以存儲與存儲的視頻對應的音頻數(shù)據(jù)。另一方面,即使在圖像顯示裝置100僅從包括在視頻中的幀710、720、730、740、750、760以及770之中采集并存儲一些幀710、730、750以及770時,也能夠存儲與包括在視頻中的幀710、720、730、740、750、760以及770對應的音頻數(shù)據(jù)。然而,示例性實施方式不限于此。
圖11和12是示出在PVR模式下顯示通知消息的示例的圖。
參照圖11,當在PVR模式下執(zhí)行操作時,在檢測到用戶面部表情的改變時,圖像顯示裝置100可以在顯示單元120上顯示指示檢測到面部表情的改變和正在進行記錄的消息(“Change in facial expression is detected.Recording is in progress”)810。
此時,消息810可以顯示在顯示單元120的預設(shè)區(qū)域中,并顯示預設(shè)時間,但是在預設(shè)時間之后無需顯示消息810。圖像顯示裝置100可以配置成顯示消息810,從而消息810不基于用戶的輸入進行顯示。
另外,參照圖12,在完成PVR時,圖像顯示裝置100可以連同顯示PVR的完成而顯示用于詢問是否校驗記錄的視頻的消息(“Recording is completed.Would you like to check?”)820。此時,當檢測到用于選擇“是”(“Yes”)的用戶的輸入時,圖像顯示裝置100可以顯示記錄的個人視頻列表并再現(xiàn)記錄的個人視頻。個人視頻列表將在下面參照圖13更詳細地描述。
圖13是示出顯示個人視頻列表的示例的圖。
參照圖13,個人視頻列表可以基于用戶的輸入進行顯示。例如,當在顯示圖12的消息820的狀態(tài)下檢測到用于選擇“是”的用戶的輸入時,圖像顯示裝置100可以顯示個人視頻列表(“personal video list”)910。當檢測到控制設(shè)備200的特定按鍵輸入時,或當檢測到用戶的動作時,可以顯示個人視頻列表910。然而,示例性實施方式不限于此。
個人視頻列表910可以顯示在顯示單元120的預定區(qū)域中。例如,當顯示單元120具有21:9的比例時,在顯示單元120上顯示具有16:9的比例的16:9圖像,并且可以在剩余區(qū)域中顯示個人視頻列表910。另外,在光標位于顯示單元120的預設(shè)特定區(qū)域中時,圖像顯示裝置100可以僅在特定區(qū)域中顯示個人視頻列表910。因此,如果需要的話,用戶可以將光標至移動特定區(qū)域以識別個人視頻列表910。
參照圖13,個人視頻可以由每個用戶進行分類。例如,圖像顯示裝置100可以使用從中檢測到面部表情的改變的用戶面部圖像,識別與個人視頻相應的用戶。
例如,如果在記錄第一個人(“user 1”)視頻時檢測到其面部表情的改變的用戶面部圖像和在記錄第二個人(“user 2”)視頻時檢測到其面部表情的改變的用戶面部圖像不相同,則圖像顯示裝置100可以確定第一個人視頻和第二個人視頻為不同用戶的個人視頻。另外,如果在記錄第三個人視頻時檢測到其面部表情的改變的用戶面部圖像和在記錄第一個人視頻時檢測到其面部表情的改變的用戶面部圖像相同,則能夠?qū)⒌谝粋€人視頻和第三個人視頻確定為相同用戶的個人視頻。
存儲的個人視頻可以由圖標920指示。圖標920可以包括在檢測到用戶面部表情的改變的時間點捕捉的用戶面部圖像。圖標920可以包括指示記錄的視頻的縮略圖。
如圖13所示,在光標位于圖標920上時,可以顯示與圖標920對應的視頻的相關(guān)信息。例如,該信息可以包括視頻的內(nèi)容名稱(“content name”)、視頻的廣播時間信息(“broadcast time”)、再現(xiàn)時間信息(“reproduction time”)、與在記錄視頻時檢測到的用戶面部表情相關(guān)的信息(“smile expression”)等。
另外,當檢測到用于選擇圖標920的用戶的輸入時,圖像顯示裝置100可以再現(xiàn)與選擇的圖標對應的視頻。顯示單元120可以顯示將要再現(xiàn)的視頻,并且還可以顯示指示視頻再現(xiàn)時間點的時間線931。
圖14是示出圖像顯示裝置通過服務器共享個人視頻的示例的圖。
參照圖14,根據(jù)示例性實施方式的圖像顯示裝置100可以向服務器 50傳輸存儲的個人視頻,而且可以從服務器50接收外部用戶的個人視頻。
根據(jù)示例性實施方式的服務器50可以例如為提供社交網(wǎng)絡服務(SNS)的SNS服務器。為了便于圖14的描述,服務器50將作為SNS服務器進行描述。然而,示例性實施方式不限于此。
圖像顯示裝置100的用戶可以加入SNS,并具有SNS賬戶。服務器50可以接收并存儲通過加入SNS的用戶存儲的個人視頻。
圖像顯示裝置100的用戶可以向SNS服務器50傳輸用戶信息以登錄SNS服務器50。用戶信息可以包括用于登錄SNS服務器的驗證信息。雖然未示出,但是圖像顯示裝置100可以顯示用于接收用于登錄SNS服務器50的驗證信息的輸入的登錄頁面。驗證信息可以包括標識符(ID)、電子郵件地址以及密碼中的至少一個。
當圖像顯示裝置100和SNS服務器50基于登錄SNS服務器而通過網(wǎng)絡連接時,圖像顯示裝置100可以向SNS服務器50傳輸(上傳)用戶的個人視頻。如圖14所示,圖像顯示裝置100可以與連接至社交網(wǎng)絡的其他用戶(例如,SNS朋友)共享上傳到服務器50的個人視頻。圖像顯示裝置100可以顯示與其他用戶(“SNS friend”)的個人視頻對應的圖標1010。此時,當檢測到用于選擇圖標1010的輸入時,圖像顯示裝置100可以再現(xiàn)與選擇的圖標對應的視頻。
圖15是示出操作圖像顯示裝置的示例性方法的流程圖。
參照圖15,根據(jù)示例性實施方式的圖像顯示裝置100可以顯示當前再現(xiàn)的視頻(S1110)。
該視頻可以例如包括諸如電影、戲劇、或情景喜劇、從廣播服務器接收的廣播節(jié)目、音樂視頻等的視頻。
根據(jù)示例性實施方式的圖像顯示裝置100可以進入PVR模式(S1120)。
例如,如參照圖6所描述的,能夠使用菜單屏幕進入PVR模式,或者在檢測到在控制設(shè)備200中設(shè)置的特定按鍵輸入之后直接進入PVR模式。然而,示例性實施方式不限于此。
根據(jù)示例性實施方式的圖像顯示裝置100可以捕捉用戶的面部 (S1130)。
例如,圖像顯示裝置100可以在進入PVR模式時使用照相機捕捉用戶面部圖像。
根據(jù)示例性實施方式的圖像顯示裝置100可以從捕捉到的用戶面部圖像檢測面部表情的改變(S1140)。
圖像顯示裝置100可以例如將用戶無表情的面部圖像與捕捉到的面部圖像進行比較以檢測面部表情的改變。用戶無表情的面部圖像可以為由用戶預先存儲的圖像。
另外,圖像顯示裝置100可以將在進入PVR模式時捕捉的用戶面部圖像與在進入PVR模式之后定期捕捉的用戶面部圖像進行比較,以檢測面部表情的改變。
因為已經(jīng)參照圖9對比較面部圖像以檢測面部表情的改變的方法進行了描述,所以將省略其詳細描述。
根據(jù)示例性實施方式的圖像顯示裝置100可以存儲基于檢測到面部表情的改變的時間點將要再現(xiàn)的視頻(S1150)。
例如,圖像顯示裝置100可以在存儲單元中存儲從檢測到面部表情的改變的時間點之前的第一時間點到檢測到面部表情的改變的時間點之后的第二時間點將要再現(xiàn)的視頻。此時,如參照圖6所描述的,可以由用戶預設(shè)從第一時間點到第二時間點的時間段。
圖像顯示裝置100可以從包括在從第一時間點到第二時間點將要再現(xiàn)的視頻中的幀之中采集并存儲一些幀。
根據(jù)示例性實施方式的圖像顯示方法可以實現(xiàn)成程序指令,該程序指令可以通過多個計算機執(zhí)行,并可以記錄在計算機可讀的記錄介質(zhì)中。記錄介質(zhì)可以包括程序指令、數(shù)據(jù)文件、數(shù)據(jù)結(jié)構(gòu)等。而且,程序指令可以是專門為本公開設(shè)計并配置的程序指令,或者可以是計算機軟件相關(guān)領(lǐng)域的技術(shù)人員公知并使用的程序指令。而且,記錄介質(zhì)可以包括諸如硬盤、軟盤以及磁帶的磁性介質(zhì)、諸如光盤-只讀存儲器(CD-ROM)和數(shù)字通用盤(DVD)的光學介質(zhì)、諸如光磁盤的磁光介質(zhì)、以及諸如ROM、RAM、閃速存儲器的硬件設(shè)備等。此外,程序指令不僅可以包括由編譯器生成的機器語言代碼,而且可以包括可 由計算機使用解釋器執(zhí)行的高級語言代碼。硬件設(shè)備可以配置成作為用于執(zhí)行本公開的一個或多個軟件模塊來操作。
應當理解的是,本文所描述的示例性實施方式應當僅以描述性意義進行考慮,并非用于限制的目的。對于每個示例性實施方式內(nèi)的特征或方面的描述通常應該被認為可用于其它示例性實施方式中的其它相似的特征或方面。
雖然已經(jīng)參照附圖描述了一個或多個示例性實施方式,但是本領(lǐng)域的普通技術(shù)人員將理解的是,在不背離如由所附權(quán)利要求限定的精神和范圍的情況下,在此可以進行形式和細節(jié)上的各種改變。