專利名稱:圖像顯示裝置、方法和程序的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及圖像顯示裝置、方法和程序,尤其是涉及為了提高真 實(shí)感而可以輸出顯示圖像的音頻的圖像顯示裝置、方法和程序。
背景技術(shù):
當(dāng)今,電視接收機(jī)接收由廣播站所廣播的電視信號(hào),并作為電視 廣播節(jié)目來顯示圖像或輸出音頻。
例如,在如圖1所示電視接收機(jī)1所接收的包含在電視信號(hào)中的 音頻是非立體聲格式的情況下,從電視接收機(jī)的揚(yáng)聲器2A和2B中都 輸出相同的音頻。因此,例如,如果在屏幕上的人3A到3C中的任何 一個(gè)人正在講話,那么輸出音頻的揚(yáng)聲器(揚(yáng)聲器2A或2B)沒有改 變。進(jìn)一步地,在非立體聲音頻的情況下,從左、右輸出相同的音頻, 所以正在收看/收聽的用戶聽到人3A到3C的音頻是相同的,并且真 實(shí)感纟皮削弱。
相反地,如果包含在如圖1所示電視接收機(jī)所接收信號(hào)中的音頻 是立體聲的,那么由于左右音量的不同,用戶所體驗(yàn)到的人3A到3C 的音頻產(chǎn)生方向(從用戶的角度上音頻生成位置的方向)會(huì)被改變。
然而,即使在這樣的立體聲的情況下,輸出音頻的揚(yáng)聲器是揚(yáng)聲
器2A和2B,并且不會(huì)改變,所以音頻產(chǎn)生的方向很難較大地改變, 并且因此真實(shí)感會(huì)被削弱。
同樣,通常在廣播站側(cè),不能估計(jì)每個(gè)收看者/收聽者使用什么類 型的電視接收機(jī)來收看/收聽節(jié)目。然而,對(duì)于每個(gè)用戶來說用戶的收 看/收聽環(huán)境是不同的,諸如左右揚(yáng)聲器的位置關(guān)系、揚(yáng)聲器的特性、 用戶的位置、電視接收機(jī)的放置位置等等。因此,依賴于用戶的收看/ 收聽環(huán)境,環(huán)境會(huì)與當(dāng)生成包括在電視信號(hào)中的立體聲格式的音頻信 號(hào)時(shí)的估計(jì)有很大的不同,所以廣播站試圖讓用戶獲得真實(shí)感會(huì)是很 困難的。
為了解決這個(gè)問題,已經(jīng)考慮到一種方法,其中從特定的聲源獲 得聲音以便產(chǎn)生聲學(xué)信號(hào),以及能夠從該聲學(xué)信號(hào)、運(yùn)動(dòng)圖像信號(hào)和 位置信號(hào)檢測(cè)單元中產(chǎn)生信息信號(hào)并將其記錄,通過這么做,能夠在 回放時(shí)執(zhí)行對(duì)應(yīng)于圖像顯示位置的聲學(xué)輸出(例如,參考日本未審查 的專利申請(qǐng)公開2003-264900 )。
發(fā)明內(nèi)容
然而,在這種情況下,預(yù)先從特定聲源中獲得聲音并產(chǎn)生信息信 號(hào)是必要的,但是應(yīng)用這個(gè)以接收和顯示已經(jīng)使用到現(xiàn)在的普通電視 廣播是很難。
本發(fā)明已經(jīng)將這種情況考慮進(jìn)去,并為了以很強(qiáng)的真實(shí)感輸出對(duì) 應(yīng)于所顯示圖像的音頻而提出了一種方案。
根據(jù)本發(fā)明的一個(gè)實(shí)施例,提供了一種用于顯示圖像的圖像顯示 裝置,其具有用于顯示圖像的圖像顯示部件,用于輸出對(duì)應(yīng)于圖像顯 示部件所顯示圖像的多個(gè)音頻的音頻輸出部件,以及用于分析圖像、 根據(jù)圖像內(nèi)容控制音頻輸出部件、以及選擇輸出音頻位置的音頻輸出 位置控制部件。
音頻輸出部件可以具有多個(gè)揚(yáng)聲器,其配置有音頻輸出位置控制 部件,以便控制音頻輸出部件來選擇輸出音頻的揚(yáng)聲器。
音頻輸出部件能夠通過控制音頻的輸出定時(shí)來控制實(shí)際的音頻輸
出位置,同時(shí)音頻輸出位置控制部件控制輸出部件和選擇輸出定時(shí), 由此控制輸出音頻的實(shí)際位置。
音頻輸出位置控制部件可以具有屏幕區(qū)域分割部件,其用于將圖 像顯示部件的顯示屏分割為預(yù)定數(shù)量的多個(gè)區(qū)域,差值平均值計(jì)算部 件,其用于對(duì)屏幕區(qū)域分割部件所分割的每個(gè)區(qū)域的、具有預(yù)定特征 且其像素值預(yù)先確定的每個(gè)像素,計(jì)算幀間亮度值的差值的平均值, 以及音頻輸出控制部件,其基于差值平均值計(jì)算部件所計(jì)算出的差值 的平均值來控制音頻輸出部件、選擇輸出音頻的位置。
音頻可以是單通道音頻,或者可以是多通道音頻。
音頻輸出位置控制部件可以具有差值平均值計(jì)算部件,其用于對(duì) 分配到圖像的多個(gè)區(qū)域中的每一個(gè)中、具有預(yù)定特征且其像素值預(yù)先 確定的每個(gè)像素來計(jì)算差值平均值,該差值平均值是幀間亮度值的差
值的平均值;音量確認(rèn)部件,用于確認(rèn)多通道中每個(gè)的音量來指定音 頻輸出位置;差值平均值校正部件,其基于已經(jīng)由音量確認(rèn)部件所確 認(rèn)并指定音量的音頻輸出位置來校正差值平均值計(jì)算部件所計(jì)算的差 值平均值;區(qū)域指定部件,其基于差值平均值校正部件所校正的差值 平均值來指定用于輸出音頻的區(qū)域;以及音頻輸出控制部件,其用于 控制音頻輸出部件,以便從對(duì)應(yīng)于區(qū)域指定部件所指定區(qū)域的位置輸 出音頻。
音頻輸出位置控制部件可以具有差值平均值計(jì)算部件,其用于對(duì) 分配到圖像的多個(gè)區(qū)域中的每一個(gè)中、具有預(yù)定特征且其像素值預(yù)先 確定的每個(gè)像素來計(jì)算差值平均值,該差值平均值是幀間亮度值的差 值的平均值;區(qū)域指定部件,其基于差值平均值計(jì)算部件所計(jì)算的差 值平均值來指定用于輸出音頻的區(qū)域;音量調(diào)整部件,其基于區(qū)域指 定部件所指定的音頻輸出區(qū)域,來確定從音頻輸出部件所輸出的音頻
音量的調(diào)整量;音量確認(rèn)部件,用于確認(rèn)多通道中每一個(gè)的音量來指 定音頻輸出位置;比較部件,其用于對(duì)區(qū)域指定部件所指定的音頻輸 出區(qū)域與音頻輸出位置進(jìn)行比較,在所述音頻輸出位置中,音量由音 量確認(rèn)部件所確認(rèn)并指定;調(diào)整量校正部件,其基于比較部件的比較
結(jié)果,校正由音量調(diào)整部件所確定的音頻音量的調(diào)整量;以及音頻輸 出控制部件,其用于控制音頻輸出部件,以便基于調(diào)整量校正部件所 校正的音量調(diào)整量來調(diào)整音頻音量。
圖像顯示裝置可以具有用戶位置對(duì)應(yīng)處理部件,其根據(jù)用戶的位 置,檢測(cè)用戶收看/收聽圖像和音頻的位置,以及通過音頻輸出部件控 制音頻輸出的延遲定時(shí)量。
音頻輸出部件可以具有多個(gè)可拆卸揚(yáng)聲器,同時(shí)圖像顯示裝置進(jìn) 一步包括區(qū)域設(shè)置部件,用于根據(jù)連接到其上的揚(yáng)聲器的位置來設(shè)置 由屏幕區(qū)域分割部件所要分割的區(qū)域。
根據(jù)本發(fā)明的另外一個(gè)實(shí)施例,提供一種用于在圖像顯示裝置上 顯示圖像的圖像顯示方法,包括步驟顯示圖像,分析所顯示圖像, 根據(jù)圖像內(nèi)容選擇對(duì)應(yīng)于圖像的音頻輸出位置,以及從所選擇的位置 上輸出音頻。
根據(jù)本發(fā)明的另外一個(gè)實(shí)施例,提供一種用在計(jì)算機(jī)上執(zhí)行顯示 圖像處理的程序,包括步驟顯示圖像,分析所顯示圖像,根據(jù)圖像 內(nèi)容選擇對(duì)應(yīng)于圖像的音頻輸出位置,以及從所選擇的位置上輸出音 頻。
根據(jù)本發(fā)明的另外一個(gè)實(shí)施例,提供一種用于顯示圖像的圖像顯 示裝置,其具有圖像顯示單元,用于顯示圖像;音頻輸出單元,用于 從對(duì)應(yīng)于圖像顯示單元所顯示圖像的多個(gè)位置中輸出音頻;以及音頻 輸出位置控制單元,用于分析圖像、根據(jù)圖像內(nèi)容控制音頻輸出單元 和選擇輸出音頻的位置。
因此,采用本發(fā)明的實(shí)施例,顯示圖像,分析顯示圖像,根據(jù)圖 像內(nèi)容對(duì)對(duì)應(yīng)于圖像的音頻輸出位置進(jìn)行選擇,以及將音頻從所選擇 的位置輸出。
同樣,采用本發(fā)明的實(shí)施例,可以在顯示圖像的同時(shí)輸出音頻。 特別地,能夠輸出對(duì)應(yīng)于所顯示圖像的音頻以便提高真實(shí)感。
圖1是說明目前所使用的電視接收裝置的透視圖2是說明應(yīng)用本發(fā)明一個(gè)實(shí)施例所述的顯示裝置的外視圖3是說明圖2顯示裝置內(nèi)部結(jié)構(gòu)示例的框圖4是說明圖3中音頻輸出位置控制單元的詳細(xì)結(jié)構(gòu)示例的框圖5是說明區(qū)域分割示例的模型圖6是說明圖4中差值平均值計(jì)算單元的詳細(xì)結(jié)構(gòu)示例的框圖7是用于描述圖像顯示處理流程示例的流程圖8是用于描述音頻輸出位置控制處理流程示例的流程圖9是用于描述特征像素差值平均值計(jì)算處理流程示例的流程
圖IO是說明顯示裝置外視圖的另一個(gè)結(jié)構(gòu)示例的框圖11是應(yīng)用本發(fā)明一個(gè)實(shí)施例的投影系統(tǒng)的結(jié)構(gòu)示意圖12是顯示裝置另一個(gè)結(jié)構(gòu)示例的示意圖13是顯示裝置外視圖的又一個(gè)結(jié)構(gòu)示例的示意圖14是用于描述另一個(gè)音頻輸出位置控制處理流程示例的流程
圖15是說明音頻輸出控制單元詳細(xì)結(jié)構(gòu)示例的框圖; 圖16是用于描述音頻輸出控制處理流程示例的流程圖; 圖n是說明音頻輸出控制單元另外一個(gè)詳細(xì)結(jié)構(gòu)示例的框圖; 圖18是用于描述音頻輸出控制處理流程的另 一個(gè)示例的流程圖; 圖19是說明顯示裝置另一個(gè)結(jié)構(gòu)示例的框圖; 圖20是說明圖19中對(duì)應(yīng)處理單元的用戶位置的詳細(xì)結(jié)構(gòu)示例的 框圖21是用于描述用戶位置相關(guān)處理流程示例的流程圖; 圖22是說明顯示裝置另一個(gè)結(jié)構(gòu)示例外視圖的框圖; 圖23是說明輸入引導(dǎo)圖像的顯示示例的模型圖; 圖24是說明顯示裝置另一個(gè)結(jié)構(gòu)示例的框圖25是說明圖24中區(qū)域設(shè)置單元的詳細(xì)結(jié)構(gòu)示例的框圖26是用于描述區(qū)域設(shè)置處理流程示例的流程圖27是說明顯示裝置的另一個(gè)結(jié)構(gòu)示例的框圖; 圖28是說明圖27中區(qū)域設(shè)置單元詳細(xì)結(jié)構(gòu)示例的框圖; 圖29是用于描述區(qū)域設(shè)置處理流程的另一個(gè)示例的流程圖;以及 圖30是說明應(yīng)用本發(fā)明一個(gè)實(shí)施例的個(gè)人計(jì)算機(jī)結(jié)構(gòu)示例的示 意圖。
具體實(shí)施例方式
在描述本發(fā)明實(shí)施例之前,在下面討論權(quán)利要求的特征與下面的 本發(fā)明實(shí)施例所公開的特定元件之間的對(duì)應(yīng)關(guān)系。該說明書想要確保 在說明書中描述所要求保護(hù)的發(fā)明所支持的實(shí)施例。因此,即使在下 述實(shí)施例中的元件沒有作為涉及本發(fā)明某一特征而描述,但是這不一 定意味著該元件不與權(quán)利要求的特征相關(guān)。相反地,即使在這里的元 件作為涉及權(quán)利要求某一特征而進(jìn)行描述,但是這不一定意味著該元
件與權(quán)利要求的其它特征無關(guān)。
進(jìn)一步地,該說明書不應(yīng)當(dāng)解釋為限制在權(quán)利要求所描述的實(shí)施 例公開的發(fā)明的所有方面。也就是說,說明書不否認(rèn)實(shí)施例中所描述 的,但本申請(qǐng)沒有要求保護(hù)的本發(fā)明的方面的存在,即,本發(fā)明的其 它方面將來可以通過分案申請(qǐng),或通過修改而附加要求。
根據(jù)本發(fā)明一個(gè)實(shí)施例所述的圖像顯示裝置(例如,圖2中的顯 示裝置)包括圖像顯示部件(例如,圖3中的顯示單元),其用于顯 示圖像;音頻輸出部件(例如,圖3中的音頻輸出單元),其用于從 多個(gè)位置中輸出對(duì)應(yīng)于圖像顯示部件所顯示圖像的音頻;以及音頻輸 出位置控制部件(例如,圖3中的音頻輸出位置控制單元),其用于 分析圖像、根據(jù)圖像內(nèi)容來控制音頻輸出部件、以及選擇從中輸出音 頻的位置。
音頻輸出部件可以被配置為具有多個(gè)揚(yáng)聲器(例如,圖2中的揚(yáng) 聲器),并且音頻輸出位置控制部件控制音頻輸出部件以便選擇從中 輸出音頻的揚(yáng)聲器。
可以配置音頻輸出部件,以便通過控制音頻輸出定時(shí)來實(shí)際地控
制音頻輸出位置,以及使音頻輸出位置控制部件通過控制音頻輸出部
件和選擇輸出定時(shí)來控制從中輸出音頻的實(shí)際位置(例如,圖21中的 步驟S133)。
音頻輸出位置控制部件可以被配置為具有屏幕區(qū)域分割部件(例 如,圖4中的屏幕區(qū)域分割單元),其用于將圖像顯示部件的顯示屏 分割為預(yù)定的多個(gè)區(qū)域;差值平均值計(jì)算部件(例如,圖4中差值平 均值計(jì)算單元),其用于對(duì)每個(gè)由屏幕區(qū)域分割部件所分割的區(qū)域中
的、具有預(yù)定特征且其像素值預(yù)先確定的每個(gè)像素計(jì)算幀間亮度值的 差值的平均值;以及音頻輸出控制部件(例如,圖4中的音頻輸出控 制單元),其基于差值平均值計(jì)算部件所計(jì)算的差值平均值來控制音 頻輸出部件以及選擇輸出音頻的位置。
可以設(shè)計(jì)這樣一種配置,其中音頻是單通道音頻(例如,圖4中 的音頻數(shù)據(jù))??梢栽O(shè)計(jì)這樣一種配置,其中音頻是多通道音頻(例 如,圖15中的音頻數(shù)據(jù))。
音頻輸出位置控制部件可以被配置為具有差值平均值計(jì)算部件 (例如,圖4中的差值平均值計(jì)算單元),其用于對(duì)分配到圖像的多 個(gè)區(qū)域中的每一個(gè)中、具有預(yù)定特征且其像素值預(yù)先確定的每個(gè)像素 計(jì)算差值平均值,該差值平均值是幀間亮度值的差值的平均值;音量 確認(rèn)部件(例如,圖15中的音頻確認(rèn)單元),其用于確認(rèn)多通道中每 個(gè)的音量來指定音頻輸出位置;差值平均值校正部件(例如,圖15中 的差值平均值校正單元),其基于由音量確認(rèn)部件已經(jīng)確認(rèn)并指定的
音頻輸出位置來校正差值平均值計(jì)算部件所計(jì)算的差值平均值;區(qū)域
指定部件(例如,圖15中的區(qū)域指定單元),其基于差值平均值校正
部件所校正的差值平均值來指定用于輸出音頻的區(qū)域;以及音頻輸出
控制部件(例如,圖15中的輸出控制單元),其用于控制音頻輸出部
件,以便從對(duì)應(yīng)于區(qū)域指定部件所指定區(qū)域的位置輸出音頻。 可以設(shè)計(jì)這樣一種配置,其中音頻輸出位置控制部件可以具有差
值平均值計(jì)算部件(例如,圖4中的差值平均值計(jì)算單元),其用于
對(duì)分配到圖像的多個(gè)區(qū)域中的每一個(gè)中、具有預(yù)定特征且其像素值預(yù)
先確定的每個(gè)像素計(jì)算差值平均值,該差值平均值是幀間亮度值的差
值的平均值;區(qū)域指定部件(例如,圖17中的區(qū)域指定單元),其基 于差值平均值計(jì)算部件所計(jì)算的差值平均值來指定用于輸出音頻的區(qū) 域;音量調(diào)整部件(例如,圖17中的音量調(diào)整單元),其基于區(qū)域指 定部件所指定的音頻輸出區(qū)域,來確定從音頻輸出部件所輸出的音頻 音量的調(diào)整量;音量確認(rèn)部件(例如,圖17中的音量確認(rèn)單元),用 于確認(rèn)多通道中每個(gè)的音量來指定音頻輸出位置;比較部件(例如, 圖17中的比較單元),其用于對(duì)區(qū)域指定部件所指定的音頻輸出區(qū)域 與音頻輸出位置進(jìn)行比較,在所述音頻輸出位置中,音量由音量確認(rèn) 部件所確認(rèn)并指定;調(diào)整量校正部件(例如,圖17中的調(diào)整量校正單 元),其基于比較部件的比較結(jié)果,校正由音量調(diào)整部件所確定的音 頻音量的調(diào)整量;以及音頻輸出控制部件(例如,輸出控制單元), 其用于控制音頻輸出部件,以便基于調(diào)整量校正部件所校正的音量調(diào) 整量來調(diào)整音頻音量。
圖像顯示裝置可以具有用戶位置對(duì)應(yīng)處理部件(例如,圖19中的 用戶位置對(duì)應(yīng)處理單元),其根據(jù)用戶的位置,檢測(cè)用戶收看/收聽圖 像和音頻的位置,以及控制音頻輸出部件所調(diào)節(jié)的音頻輸出定時(shí)的延 遲量。
音頻輸出部件可以具有多個(gè)可拆卸揚(yáng)聲器(例如,圖22中的揚(yáng)聲 器),并且圖像顯示裝置進(jìn)一步包括區(qū)域設(shè)置部件(例如,圖24中的
區(qū)域設(shè) 置單元),其根據(jù)連接到其上的揚(yáng)聲器位置來設(shè)置由屏幕區(qū)域 分割部件所分割的區(qū)域。
根據(jù)本發(fā)明的 一 個(gè)實(shí)施例所述的 一 種圖像顯示方法或程序,可以 包括步驟顯示圖像(例如,圖7中的步驟S5),分析所顯示圖像, 根據(jù)圖像內(nèi)容選擇對(duì)應(yīng)于圖像的音頻輸出位置(例如,圖7中的步驟 S4),以及從所選擇的位置上輸出音頻(例如,圖7中的步驟S6)。 本發(fā)明的實(shí)施例在下面將結(jié)合參考附圖進(jìn)行描述。 圖2是說明應(yīng)用本發(fā)明的顯示裝置外視圖的結(jié)構(gòu)示例框圖。在圖 2中,顯示裝置IO在用于顯示圖像的區(qū)域底端具有三個(gè)揚(yáng)聲器(揚(yáng)聲
器11-13)。圖像顯示裝置IO通過接收電視信號(hào)或通過外部輸入獲得 內(nèi)容數(shù)據(jù)來獲取圖像數(shù)據(jù)或音頻數(shù)據(jù),并在監(jiān)視器上顯示對(duì)應(yīng)于這些 圖像數(shù)據(jù)的圖像作為顯示圖像20,或從揚(yáng)聲器11-13中輸出對(duì)應(yīng)于顯 示圖像20的音頻。
例如,在一種情況下,三個(gè)人21-23在顯示圖4象20中正在講話, 顯示裝置10分析顯示圖像20,從位于左端的揚(yáng)聲器11中輸出位于左 端的人21的聲音,從位于中間的揚(yáng)聲器12中輸出位于中間的人22的 聲音,以及從位于右端的揚(yáng)聲器13中輸出位于右端的人23的聲音。 因此,通過根據(jù)顯示圖像20的內(nèi)容控制音頻輸出位置,顯示裝置10 能夠輸出對(duì)應(yīng)于顯示圖像20的音頻,以便提高真實(shí)感。
圖3是顯示裝置10內(nèi)部結(jié)構(gòu)示例的框圖。在圖3中,顯示裝置 10具有天線31、調(diào)諧器32、外部輸入接收器33、輸入控制單元34、 圖像處理單元35、音頻處理單元36、音頻輸出位置控制單元37、顯 示單元38、音頻輸出單元39、控制單元41以及用戶指令接收單元42。
調(diào)諧器31選擇用戶想要的廣播(選擇頻道),通過天線31接收 所選擇的電視信號(hào),并將所接收的電視信號(hào)提供給輸入控制單元34。 外部輸入接收單元具有用于從外部獲取諸如運(yùn)動(dòng)圖像或音頻這樣的內(nèi) 容數(shù)據(jù)的外部輸入終端,該外部輸入接收單元通過連接到外部輸入終 端的電纜來獲取內(nèi)容數(shù)據(jù),并將其提供給輸入控制單元34。
輸入控制單元34基于用戶指令等來執(zhí)行涉及電視信號(hào)或內(nèi)容數(shù) 據(jù)輸入方面的處理,例如,執(zhí)行諸如從電視信號(hào)或內(nèi)容數(shù)據(jù)中提取和 分割圖像數(shù)據(jù)和音頻數(shù)據(jù)這樣的處理。而且,輸入控制單元34將輸出 的圖像數(shù)據(jù)提供給圖像處理單元35,并將輸出的音頻數(shù)據(jù)提供給音頻 處理單元36。
圖像處理單元35對(duì)輸入控制單元34所提供的圖像數(shù)據(jù)執(zhí)行例如 數(shù)據(jù)格式轉(zhuǎn)換或諸如亮度或色彩調(diào)整這樣的圖像處理來處理圖像,, 并且將已被處理過的圖像數(shù)據(jù)提供給顯示單元38并顯示該圖像。同 樣,圖像處理單元35也將處理過的圖像數(shù)據(jù)提供給音頻輸出位置控制 單元37。
音頻處理單元36對(duì)輸入控制單元34所提供的音頻數(shù)據(jù)執(zhí)行諸如 效果處理這樣的音頻處理,并將處理過的音頻數(shù)據(jù)提供給音頻輸出位 置控制單元37。注意,這里的音頻數(shù)據(jù)是作為非立體聲(單通道)信 息。立體聲格式(多通道)的音頻數(shù)據(jù)將在后面進(jìn)行描述。
音頻輸出位置控制單元37分析圖像處理單元35所提供的圖像數(shù) 據(jù)中的圖像,以及如果現(xiàn)場(chǎng)是有一個(gè)人在講話,那么音頻處理單元36 所提供音頻數(shù)據(jù)的輸出目標(biāo)被控制,并且將音頻數(shù)據(jù)提供給音頻輸出 單元39,以便從靠近講話者位置的揚(yáng)聲器中輸出該音頻。
顯示單元38具有用于顯示圖像的監(jiān)視器(未示出),并且將對(duì)應(yīng) 于圖像處理單元35所提供圖像數(shù)據(jù)的圖像顯示在監(jiān)視器上。
在圖2中,音頻輸出單元39具有揚(yáng)聲器11-13,并從音頻輸出位 置控制單元37所指定的揚(yáng)聲器(揚(yáng)聲器11-13中的一個(gè))中輸出音頻 輸出位置控制單元37所提供的音頻數(shù)據(jù)。
例如,音頻輸出單元39中揚(yáng)聲器11-13中的每一個(gè)通過不同的總 線連接到輸出位置控制單元37上,以及音頻輸出位置控制單元37通 過選擇輸出音頻數(shù)據(jù)的總線來選擇輸出從其音頻數(shù)據(jù)的揚(yáng)聲器。通過 音頻輸出單元39,聲音從由音頻數(shù)據(jù)提供的那個(gè)揚(yáng)聲器中輸出。
注意,可以設(shè)計(jì)一個(gè)配置,其中音頻輸出單元39具有用于切換輸 出目標(biāo)的切換功能,并且在音頻輸出位置控制單元37通過用在從所有 揚(yáng)聲器輸出的情況中的公用總線將音頻數(shù)據(jù)提供給音頻輸出單元39 的同時(shí),提供表示音頻數(shù)據(jù)輸出目標(biāo)的控制信息,音頻輸出單元39基 于其控制信息切換開關(guān),并且音頻數(shù)據(jù)從音頻輸出位置控制單元37所 選擇的揚(yáng)聲器中輸出。
控制單元41基于例如用戶指令接收器42所接收的用戶指令等來 控制全部的顯示裝置10,該顯示裝置10包括調(diào)諧器32、外部輸入接 收機(jī)33、輸入控制單元34、圖像處理單元35、音頻處理單元36、音 頻輸出位置控制單元37、顯示單元38和音頻輸出單元39。
用戶指令接收器42具有光接收器,其通過接收遙控器輸出的紅外 光來接收包括用戶指令的紅外信號(hào),其中所述遙控器是由用戶所操作
的輸入裝置,例如,在荻得所提供的用戶指令之后,將其提供給控制
單元41。注意,用戶指令接收器42可以配置為具有諸如按鈕或開關(guān) 或鍵盤或鼠標(biāo)等等這樣的輸入裝置。
圖4是顯示音頻輸出位置控制單元37詳細(xì)結(jié)構(gòu)示例的框圖。在圖 4中,音頻輸出位置控制單元37具有屏幕區(qū)域分割單元51、差值平均 值計(jì)算單元52、確定單元53和音頻輸出控制單元54。
屏幕區(qū)域分割單元51根據(jù)揚(yáng)聲器的配置將顯示屏分割為多個(gè)區(qū) 域,并將多個(gè)區(qū)域分配給由圖像處理單元35所提供圖像數(shù)據(jù)中的每幀 圖像。
在圖5中說明了一個(gè)區(qū)域分割的例子。如圖5所示,顯示裝置10 具有沿水平方向一排的三個(gè)揚(yáng)聲器(揚(yáng)聲器11-13)。因此,屏幕區(qū)域 分割單元51將顯示圖像20分割為沿水平方向的三個(gè)分開區(qū)域,分成 區(qū)域61-63。在圖5中,通過這樣的分割,將包括在顯示圖像20中的 人21-23的圖像分配給區(qū)域61-63。
返回到圖4,差值平均值計(jì)算單元52指定在圖像數(shù)據(jù)的每幀圖像 中顯示預(yù)定特征的部分,并通過計(jì)算幀間這樣部分的亮度值差值來測(cè) 量特征部分中亮度值的幀間變化量。差值平均值計(jì)算單元52計(jì)算每個(gè) 區(qū)域中幀間變化量的平均值。差值平均值計(jì)算單元52的詳細(xì)結(jié)構(gòu)示例 將在后面進(jìn)行描迷。差值平均值計(jì)算單元52將所計(jì)算的差值平均值提 供給確定單元53。
確定單元53確定是否執(zhí)行音頻輸出位置控制,并且將確定結(jié)果通 知音頻輸出控制單元54。音頻輸出控制單元54基于確定單元53的確 定結(jié)果控制所提供音頻數(shù)據(jù)的輸出位置,并將音頻數(shù)據(jù)提供給音頻輸 出單元39的揚(yáng)聲器11-13中的一個(gè)。在不控制音頻數(shù)據(jù)輸出位置的情 況下,音頻輸出控制單元54將音頻數(shù)據(jù)提供給音頻輸出單元39的所 有揚(yáng)聲器11-13。
圖6是顯示差值平均值計(jì)算單元52詳細(xì)結(jié)構(gòu)示例的框圖。在圖6 中,差值平均值計(jì)算單元52具有像素值轉(zhuǎn)換單元71、幀存儲(chǔ)器72、 特征像素提取單元73、變量管理單元74、差值計(jì)算單元75、確定單
元76、差值平均值計(jì)算單元77以及差值平均值存儲(chǔ)單元78。
在獲得屏幕區(qū)域分割單元51所提供的圖像數(shù)據(jù)的基礎(chǔ)上,像素值 轉(zhuǎn)換單元71對(duì)每個(gè)像素將圖像數(shù)據(jù)轉(zhuǎn)換為預(yù)定數(shù)據(jù)格式,并將其提供 給幀存儲(chǔ)器72以便保持該數(shù)據(jù)。幀存儲(chǔ)器72以一幀為單位保持圖像 數(shù)據(jù)一幀的長(zhǎng)度。換句話說,幀存儲(chǔ)器72保持幀圖像數(shù)據(jù),直到對(duì)下 一幀圖像處理開始為止。像素值轉(zhuǎn)換單元71也將圖像數(shù)據(jù)或區(qū)域信息 提供給特征像素提取單元73。
特征像素提取單元73特征像素,其是包括在圖像數(shù)據(jù)中并且具有 預(yù)定特征的像素。例如,特征像素提取單元73提取表示諸如色調(diào)、色 飽和度、照度、亮度、RGB值等等來表示人的特征的特征像素(包括 在預(yù)先確定的顏色值范圍內(nèi)的像素)。特征像素提取單元73增加了區(qū) 域內(nèi)特征像素計(jì)數(shù)81,其作為對(duì)于每個(gè)特征像素提取來說由變量管理 單元74保持并管理的變量。
變量管理單元74存儲(chǔ)作為對(duì)每個(gè)區(qū)域特征像素?cái)?shù)據(jù)進(jìn)行計(jì)數(shù)的 變量的區(qū)域內(nèi)特征像素計(jì)數(shù)81 ,和作為對(duì)幀間特征像素亮度值的差值 求和的變量的區(qū)域內(nèi)差值總和82,并管理其值輸入/輸出的更新。例如, 變量管理單元74在特征像素提取單元73每次提取特征像素時(shí)增加區(qū) 域內(nèi)特征像素計(jì)數(shù)81。并且,變量管理單元74獲得幀間特征像素亮 度值的差值,其由差值計(jì)算單元75所提供,并將差值添加到區(qū)域內(nèi)差 值總和82中。例如,如果需要,變量管理單元74進(jìn)一步將區(qū)域內(nèi)特 征像素計(jì)數(shù)81或區(qū)域內(nèi)差值總和82提供給差值平均值計(jì)算單元77。
在獲得幀存儲(chǔ)器72保持的圖像數(shù)據(jù)之前一個(gè)幀的圖像數(shù)據(jù)的基 礎(chǔ)上,差值計(jì)算單元75針對(duì)先前幀亮度值和當(dāng)前幀亮度值之間,計(jì)算 由特征像素提取單元73所提取特征像素的差值。差值計(jì)算單元75將 所計(jì)算的差值提供給變量管理單元74。
確定單元76接收處理結(jié)果,并確定涉及全部區(qū)域內(nèi)像素的處理是 否已經(jīng)執(zhí)行,以及在區(qū)域內(nèi)所有像素處理都完成的基礎(chǔ)上,將該信息 通知給差值平均值計(jì)算單元77。
差值平均值計(jì)算單元77獲得存儲(chǔ)在變量管理單元74中的區(qū)域內(nèi)
特征像素計(jì)數(shù)81和區(qū)域內(nèi)差值總和82,并使用這些來計(jì)算作為每個(gè) 區(qū)域差值的平均值的差值平均值。同樣,在差值平均值存儲(chǔ)單元78對(duì) 所有區(qū)域的差值平均值進(jìn)行存儲(chǔ)的基礎(chǔ)上,將其中的差值平均值提供 給確定單元53。
接下來,將描述對(duì)每個(gè)部分的特定處理流程。首先,參考圖7流 程圖將描述顯示裝置10所執(zhí)行的圖像顯示處理流程的例子。
在步驟S1中,輸入控制單元34通過調(diào)諧器32接收電視信號(hào),并 從所接收的電視信號(hào)中提取圖像數(shù)據(jù)或音頻數(shù)據(jù)。在步驟S2中,圖像 處理單元35執(zhí)行涉及圖像數(shù)據(jù)的圖像處理。在步驟S3中,音頻處理 單元36執(zhí)行涉及音頻數(shù)據(jù)的音頻處理。在步驟S4中,音頻輸出位置 控制單元37控制揚(yáng)聲器(音頻輸出位置)以便根據(jù)圖像數(shù)據(jù)的數(shù)據(jù)來 輸出音頻數(shù)據(jù)的音頻。該音頻輸出位置控制處理的詳細(xì)描述將在后面
進(jìn)行描述。
在步驟S5中,顯示單元38顯示所提供圖像數(shù)據(jù)的圖像。在步驟 S6中,音頻輸出單元39基于音頻輸出位置控制單元37的控制來從揚(yáng) 聲器(位置)中輸出所提供音頻數(shù)據(jù)的音頻。
在步驟S7中,控制單元41確定圖像顯示處理是否結(jié)束,并且在 所做出的確定是處理沒有結(jié)束的情況下,流程返回步驟S1,并在其后 重復(fù)該處理。同樣,在步驟S7中所做出的確定是處理結(jié)束的情況下, 控制單元41將處理繼續(xù)到步驟S8,執(zhí)行諸如關(guān)斷電源這樣的結(jié)束處 理,并結(jié)束圖像顯示處理。
接下來,參考圖8流程圖將描述圖7中步驟S4所執(zhí)行的音頻輸出 位置控制處理的詳細(xì)流程示例。
當(dāng)音頻輸出位置控制處理開始時(shí),在步驟S21中屏幕區(qū)域分割單 元51將屏幕區(qū)域分割為對(duì)應(yīng)揚(yáng)聲器配置的多個(gè)區(qū)域。在步驟S22中, 差值平均值計(jì)算單元52計(jì)算顯示為預(yù)定特征的像素(特征像素)的差 值平均值。特征像素差值平均值計(jì)算處理的細(xì)節(jié)將在后面進(jìn)行描述。
在步驟S23中,確定單元53確定所有區(qū)域的差值平均值是否等于 或低于預(yù)定閾值。如果確定即使一個(gè)差值平均值在閾值之上,那么確定單元53將流程繼續(xù)到步驟S24。在步驟S24中,音頻輸出控制單元 54指定具有最大差值平均值的區(qū)域,也就是說,在圖像運(yùn)動(dòng)中的區(qū)域 發(fā)音最大,諸如顯示嘴部等這樣的特征的圖像,例如,確定該區(qū)域有 人在講話,選擇對(duì)應(yīng)于該區(qū)域的揚(yáng)聲器作為音頻輸出揚(yáng)聲器,以及基 于音頻輸出單元39的選擇提供音頻數(shù)據(jù),并從對(duì)應(yīng)于具有最大差值平 均值的區(qū)域的揚(yáng)聲器中輸出該音頻。在結(jié)束步驟S25中的處理的基礎(chǔ) 上,音頻輸出控制單元54將處理繼續(xù)到步驟S27。
同樣,在步驟S23中,所做出的確定是對(duì)所有區(qū)域的差值平均值 等于或低于該閾值,那么確定單元53將處理繼續(xù)到步驟S26中。在步 驟S26中,音頻輸出控制單元54將音頻數(shù)據(jù)提供給所有的揚(yáng)聲器,并 從所有的揚(yáng)聲器中輸出音頻。在結(jié)束步驟S26中的處理的基礎(chǔ)上,音 頻輸出控制單元54將處理繼續(xù)到步驟S27中。
在步驟S27中,音頻輸出控制單元54確定音頻輸出位置控制處理 是否結(jié)束,并在所做出的確定是處理沒有結(jié)束的情況下,流程返回到 步驟S22中,并在其后重復(fù)該處理。同樣,在步驟S27中所做出的確 定是音頻輸出位置控制處理結(jié)束的情況下,那么音頻輸出控制單元54 將流程繼續(xù)到步驟S28中,執(zhí)行結(jié)束處理,結(jié)束音頻輸出位置控制處 理,將步驟返回到圖7中的步驟S4中,以及執(zhí)行步驟S5的處理及其 其后的處理。
接下來,將參考圖9的流程圖描述圖8中步驟S22所執(zhí)行的特征 像素差值平均值計(jì)算處理的詳細(xì)流程示例。
在步驟S41中,變量管理單元47初始化諸如區(qū)域內(nèi)特征像素計(jì)數(shù) 81和區(qū)域內(nèi)差值總和82這樣的變量。在步驟S42中,像素值轉(zhuǎn)換單 元71轉(zhuǎn)換像素值。在步驟S43中特征像素提取單元73確定具有由像 素值轉(zhuǎn)換單元71所轉(zhuǎn)換像素值的像素是否是具有人物圖像特征的像 素,并在所做出的確定是其為特征像素的情況下,流程進(jìn)入到步驟
在步驟S44中,變量管理單元74將"+l"加入?yún)^(qū)域內(nèi)特征像素計(jì)數(shù) 81中。在步驟S45中,差值計(jì)算單元75計(jì)算與先前幀之間的亮度值
差值。在步驟S46中,變量管理單元74將差值加入?yún)^(qū)域內(nèi)差值總和 82中。在結(jié)束步驟SM中處理的基礎(chǔ)上,變量管理單元74將步驟繼 續(xù)到步驟S47。同樣,如果在步驟S43中的像素被確定不是特征像素, 那么特征像素提取單元73將處理繼續(xù)到步驟S47中。
在步驟S47中,確定單元76確定區(qū)域內(nèi)的所有像素是否已經(jīng)處理, 并在所做出的確定是像素還沒有全部處理的情況下,處理返回到步驟 S42,并在其后對(duì)下一個(gè)像素重復(fù)該處理。同樣,在步驟S47中所做出 的確定是區(qū)域內(nèi)的所有像素已經(jīng)處理完,那么確定單元76將處理繼續(xù) 到步驟S48。
在步驟S48中,差值平均值計(jì)算單元77基于區(qū)域內(nèi)特征像素計(jì)數(shù) 81和區(qū)域內(nèi)差值總和82的數(shù)值來計(jì)算區(qū)域內(nèi)的差值平均值。在步驟 S49中,差值平均值存儲(chǔ)單元78存儲(chǔ)所計(jì)算的差值平均值,并在步驟 S50中,確定對(duì)所有區(qū)域的處理是否已經(jīng)結(jié)束,并在所做出的確定是 區(qū)域仍然沒有處理完的情況下,處理返回到步驟S41中,并在其后對(duì) 下一個(gè)區(qū)域重復(fù)該處理。
同樣,在步驟S50中所做出的確定是所有區(qū)域已經(jīng)處理完的情況 下,差值平均值存儲(chǔ)單元78結(jié)束特征像素差值平均值計(jì)算處理,將步 驟返回到圖8中的步驟S22,并執(zhí)行步驟S23以及其后的處理。
通過執(zhí)行如上述各種處理,顯示裝置10分析涉及諸如圖2所示顯 示圖像20那樣的顯示圖像20,并因此不僅僅能夠從像素值中的特征 中指定人21-23,而且能通過使用幀間差值平均值指定人21-13中的哪 個(gè)在講話,以及能夠根據(jù)顯示圖像20的內(nèi)容來控制音頻輸出位置,以 便例如從揚(yáng)聲器11中輸出人21的聲音,從揚(yáng)聲器12中輸出人23的 聲音,和從揚(yáng)聲器13中輸出人23的聲音。
采用這樣的一種配置,顯示裝置10能夠輸出對(duì)應(yīng)所顯示圖像的音 頻,以<更提高真實(shí)感。
注意,揚(yáng)聲器的數(shù)目是可選的,并且其配置也是可選的。同樣, 區(qū)域和揚(yáng)聲器不需要采用 一對(duì)一相關(guān)的方式來配置,而是可以配置為 一個(gè)揚(yáng)聲器對(duì)應(yīng)多個(gè)區(qū)域,或一個(gè)區(qū)域?qū)?yīng)多個(gè)揚(yáng)聲器。例如,如圖
IOA所示,可以設(shè)計(jì)這樣一種配置,其中顯示裝置IO具有十四個(gè)揚(yáng)聲 器(揚(yáng)聲器MA力1P)以便環(huán)繞顯示圖像20。在這種情況中,顯示圖 像20被分割為總共十二個(gè)區(qū)域(區(qū)域101-112),在垂直方向有三個(gè), 在橫向方向有四個(gè),如圖10B所示。
此時(shí),例如,揚(yáng)聲器91A和91P對(duì)應(yīng)區(qū)域101,揚(yáng)聲器91B對(duì)應(yīng) 區(qū)域102,揚(yáng)聲器91C對(duì)應(yīng)區(qū)域103,揚(yáng)聲器91D和91E對(duì)應(yīng)區(qū)域104, 揚(yáng)聲器91N對(duì)應(yīng)區(qū)域105,揚(yáng)聲器91B、 91F、 91K和91N對(duì)應(yīng)區(qū)域 106,揚(yáng)聲器91C、 91F、 91J和91N對(duì)應(yīng)區(qū)域107,揚(yáng)聲器91F對(duì)應(yīng) 區(qū)域108,揚(yáng)聲器91L和91M對(duì)應(yīng)區(qū)域109,揚(yáng)聲器91K對(duì)應(yīng)區(qū)域110, 揚(yáng)聲器91J對(duì)應(yīng)區(qū)域111,揚(yáng)聲器91G和91H對(duì)應(yīng)區(qū)域112。毋庸置 疑,也可以使用其它方式的關(guān)系。
注意,只要圖像被顯示以及音頻對(duì)應(yīng)于所述圖像輸出,就可以以 任何方式來調(diào)整本發(fā)明。例如,可以使用如圖ll所示那樣使用投影儀 的系統(tǒng)。在圖11的情況中,將投影儀122放置在屏幕121后面的遠(yuǎn)處, 并且投影儀122將圖像投影到屏幕121的后側(cè)。揚(yáng)聲器131-142線性 安置在屏幕121的前面,面向后側(cè)的遠(yuǎn)處,并被配置為從揚(yáng)聲器中輸 出對(duì)應(yīng)于圖像123的音頻。換句話說,揚(yáng)聲器131-142從投影儀122 投影到屏幕121上的圖像123的后側(cè)輸出音頻。
采用這樣的一個(gè)系統(tǒng),如上所述,通過根據(jù)投影圖像123的內(nèi)容 來選擇并從揚(yáng)聲器131-142中輸出音頻,例如講話者的聲音可以直接 從該人后面的揚(yáng)聲器中輸出。因此,采用圖ll中的系統(tǒng),能夠輸出對(duì) 應(yīng)于所顯示圖像的音頻,從而提高了真實(shí)感。
注意,可以設(shè)計(jì)這樣的一種配置,其中控制從每個(gè)揚(yáng)聲器輸出的 音量來代替選擇輸出音頻的揚(yáng)聲器。換句話說,代替控制各個(gè)揚(yáng)聲器 是否輸出音頻,而設(shè)計(jì)了這樣一種如上所述的配置,其中從對(duì)應(yīng)于所 選擇區(qū)域的揚(yáng)聲器中輸出是主要的,并減少?gòu)膶?duì)應(yīng)于其它區(qū)域的揚(yáng)聲 器中輸出音頻的音量。
同樣,可以設(shè)計(jì)一種配置,其中音頻數(shù)據(jù)具有多通道,例如,對(duì) 不能夠指定顯示圖像20中的音頻輸出位置的音頻和能夠指定顯示圖
像20中的音頻輸出位置的音頻,諸如人聲,將音頻數(shù)據(jù)處理成分離的 通道。
圖n是示出這樣一種情況中顯示裝置的結(jié)構(gòu)示例的框圖。在圖
l2中,顯示裝置150具有類似于顯示裝置10那樣的基本配結(jié)構(gòu),但 是音頻處理單元151不同于音頻處理單元36,并且輸入音頻數(shù)據(jù)的每 個(gè)通道中的音頻都被分割并輸出。將諸如背景音樂這樣的不用指定音 頻輸出位置的音頻提供給直接音頻輸出單元152,并且音頻輸出位置 控制單元37僅僅處理需要指定音頻輸出位置的音頻,諸如人聲。音頻 輸出單元152獲得每個(gè)通道的音頻數(shù)據(jù),并且合成每個(gè)揚(yáng)聲器的每個(gè) 通道并輸出該音頻。
因此,可以將顯示裝置配置為僅僅控制一部分通道中的音頻輸出 位置。注意,可以控制對(duì)于每個(gè)通道的音頻輸出位置,以便彼此獨(dú)立。
進(jìn)一步地,毋庸置疑,顯示裝置可以控制左右兩通道音頻數(shù)據(jù)的 輸出位置,如同立體聲。在這種情況中,如圖13所示,可以將具有左 右兩通道的揚(yáng)聲器配置為一組,并且可以進(jìn)行類似于上述非立體聲格 式音頻數(shù)據(jù)的處理。
例如,在圖13的情況中,顯示裝置160具有線性放置在水平方向 上的三個(gè)立體聲揚(yáng)聲器(立體聲揚(yáng)聲器161-163)。立體聲揚(yáng)聲器161 具有左揚(yáng)聲器161A和右揚(yáng)聲器161B,并能夠在左右兩個(gè)通道上輸出 音頻。立體聲揚(yáng)聲器162類似地具有左揚(yáng)聲器162A和右揚(yáng)聲器162B, 并能夠在左右兩個(gè)通道上輸出音頻。立體聲揚(yáng)聲器163類似地具有左 揚(yáng)聲器163A和右揚(yáng)聲器163B,并能夠在左右兩個(gè)通道上輸出音頻。
如在非立體聲那樣的情況中,顯示裝置160基于顯示圖像20,從 立體聲揚(yáng)聲器161-163中選擇一個(gè)用于在左右兩個(gè)通道上輸出音頻的 立體聲揚(yáng)聲器,以及從所選擇的立體聲揚(yáng)聲器(的左揚(yáng)聲器和右揚(yáng)聲 器)中的左右兩個(gè)通道上輸出音頻。注意此時(shí),使用立體聲音頻的左 右通道的音量差異來校正基于圖像所執(zhí)行的輸出位置的控制。
在不用控制音頻輸出位置的情況中,顯示裝置160使用立體聲揚(yáng) 聲器161-163作為一個(gè)立體聲揚(yáng)聲器,并且從一個(gè)方向輸出立體聲聲
音。例如,停止立體聲揚(yáng)聲器162中輸出的音頻,從立體聲揚(yáng)聲器161 (左揚(yáng)聲器161A和右揚(yáng)聲器161B兩者)中輸出左通道音頻,以及從 立體聲揚(yáng)聲器163 (左揚(yáng)聲器163A和右揚(yáng)聲器163B兩者)中輸出右 通道音頻。
將結(jié)合圖14的流程圖來描述這樣的音頻輸出位置控制處理流程 的例子。
在開始音頻輸出位置控制處理的基礎(chǔ)上,在步驟S71中,屏幕區(qū) 域分割單元51將屏幕區(qū)域分割為對(duì)應(yīng)于揚(yáng)聲器位置的多個(gè)區(qū)域。在步 驟S72中,差值平均值計(jì)算單元52計(jì)算每個(gè)分割區(qū)域的、顯示預(yù)定特 征的像素(特征像素)的差值平均值,如參考圖9中流程圖所描迷的 那樣。
在步驟S73中,確定單元確定所有區(qū)域的差值平均值是否等于或 低于預(yù)定闊值,以及如果即使一個(gè)差值平均值高于該閾值,那么處理 繼續(xù)到步驟S74。在步驟S74中,音頻輸出控制單元54基于差值平均 值和音頻數(shù)據(jù)來控制音頻輸出。在步驟S74中的處理結(jié)束的基礎(chǔ)上, 音頻輸出控制單元54將處理繼續(xù)到步驟S76。
同樣,在步驟S73中所做出的確定是所有區(qū)域的差值平均值等于 或低于該閾值的情況中,確定單元53將處理繼續(xù)到步驟S75。在步驟 S75中,音頻輸出控制單元54控制作為立體聲揚(yáng)聲器的所有揚(yáng)聲器輸 出音頻。在步驟S75中的處理結(jié)束的基礎(chǔ)上,音頻輸出控制單元54 將處理繼續(xù)到步驟S76。
在步驟S76中,音頻輸出控制單元54確定音頻輸出位置控制處理 是否結(jié)束,并在所做出的確定是沒有結(jié)束的情況下,處理返回到步驟 S72,并且重復(fù)其后的處理。同樣,在步驟S76中,如果音頻輸出位置 控制處理被確定為結(jié)束,那么音頻輸出控制單元54將處理繼續(xù)到步驟 S77中,執(zhí)行結(jié)束處理,結(jié)束音頻輸出位置控制處理,流程返回到步 驟S4中的處理,以及執(zhí)行步驟S5的處理和其后的處理。
因此,即使音頻數(shù)據(jù)具有多通道,顯示裝置也能夠以較好的真實(shí) 感輸出對(duì)應(yīng)顯示圖像的音頻。
注意,音頻輸出控制單元54可以被配置為通過利用立體聲音頻左 右通道的音量差異校正差值平均值來校正基于圖像所執(zhí)行的輸出位置
控制。在圖15中說明了在這種情況中的音頻輸出控制單元54的詳細(xì) 結(jié)構(gòu)示例。
在圖15中,音頻輸出控制單元54具有音量確認(rèn)單元171、差值 平均值校正單元172、區(qū)域指定單元173以及輸出控制單元174。
音量確認(rèn)單元171確認(rèn)音頻數(shù)據(jù)左右通道的音量差異,主要確認(rèn) 左右方向音頻被輸出的方向,以及將確認(rèn)結(jié)果提供給差值平均值校正 單元172。差值平均值校正單元172基于確認(rèn)結(jié)果以預(yù)定比率來校正 每個(gè)區(qū)域的差值平均值的數(shù)值,以及將校正后的差值平均值提供給區(qū) 域指定單元173。區(qū)域指定單元173基于已校正差值平均值來指定輸 出音頻的區(qū)域,以及將指定結(jié)果提供給輸出控制單元174。輸出控制 單元174將音頻數(shù)據(jù)提供給音頻輸出單元39,以便基于所指定的結(jié)果 從對(duì)應(yīng)于輸出音頻區(qū)域的揚(yáng)聲器中輸出音頻。
接下來,參考圖16的流程圖,將描述圖14的步驟S74中由音頻 輸出控制單元54所執(zhí)行的音頻輸出控制處理的流程示例。
首先,在步驟S91中音頻確認(rèn)單元171基于音頻數(shù)據(jù)每個(gè)通道的 音量來指定作為輸出音頻區(qū)域的音頻輸出區(qū)域。在步驟S92中,差值 平均值校正單元172基于在步驟S91中所指定的音頻輸出區(qū)域來校正 每個(gè)區(qū)域的差值平均值。例如,差值平均值校正單元172可以以10% 的比例增加音頻輸出區(qū)域的差值平均值,以及以10%的比例減少其它 所有區(qū)域的差值平均值等,從而增加了音頻輸出區(qū)域的差值平均值。
在步驟S93中,區(qū)域指定單元93指定校正后差值平均值最大的區(qū) 域。在步驟S94中,輸出控制單元174控制輸出以便從對(duì)應(yīng)于差值平 均值最大的區(qū)域的揚(yáng)聲器中輸出音頻。在步驟S94的處理結(jié)束的基礎(chǔ) 上,音頻輸出控制單元54結(jié)束音頻輸出控制處理,處理返回到圖14 中的步驟S74,并執(zhí)行步驟S76的處理及其后面的處理。
注意,可以設(shè)計(jì)一種配置,其中通過采用一種不同于上述方法的 方法使用音頻數(shù)據(jù),來校正音頻輸出控制。例如,在控制從各個(gè)揚(yáng)聲
器輸出的音頻音量大小的情況中,與基于顯示圖像內(nèi)容來控制輸出音 頻的揚(yáng)聲器的切換相反,顯示裝置可以配置為基于音頻數(shù)據(jù)的左右通 道的音量來校正根據(jù)顯示圖像內(nèi)容所確定的每個(gè)揚(yáng)聲器的音量。
在這種情況中的音頻輸出控制單元54的詳細(xì)結(jié)構(gòu)示例如圖17所 示。在圖17中,音頻輸出控制單元54具有區(qū)域指定單元181、音量 調(diào)整單元182、音量確認(rèn)單元183、比較單元184、調(diào)整量校正單元185 和輸出控制單元186。
區(qū)域指定單元181指定具有最大差值平均值的區(qū)域,并將該結(jié)果 提供給音量調(diào)整單元182和確認(rèn)單元184。音量調(diào)整單元182基于所 述結(jié)果來生成用于調(diào)整對(duì)應(yīng)于每個(gè)區(qū)域的揚(yáng)聲器所輸出音量的控制信 息,并將該控制信息提供給調(diào)整量校正單元185。音頻確認(rèn)單元183 基于音頻左右通道的音量差值來指定顯示圖像中的區(qū)域,其中從該區(qū) 域中輸出音頻,并將該結(jié)果提供給比較單元184。比較單元184對(duì)區(qū) 域指定單元181所提供的信息與音量確認(rèn)單元183所提供的信息進(jìn)行 比較,確定兩個(gè)單元所指定的區(qū)域是否匹配,并將確定結(jié)果提供給調(diào) 整量校正單元185。
基于該確定結(jié)果,如果區(qū)域指定單元181所指定的差值平均值為 最大的區(qū)域與輸出音量確認(rèn)單元183所指定音頻的區(qū)域匹配,那么調(diào) 整量校正單元185估計(jì)音頻輸出位置的偏差是強(qiáng)的以及所指定的區(qū)域 精度是高的,并因此校正音量調(diào)整單元182所生成的控制信息,然后 重新調(diào)整以便增加區(qū)域間的音量差值(各個(gè)揚(yáng)聲器的音量差值)。相 反,如果區(qū)域指定單元181所指定的差值平均值為最大的區(qū)域與輸出 音量確認(rèn)單元183所指定音頻的區(qū)域不匹配,那么調(diào)整量校正單元l85 估計(jì)音頻輸出位置的偏差是弱的以及所指定的區(qū)域精度是低的,并因 此校正音量調(diào)整單元182所生成的控制信息,然后重新調(diào)整以便減少 區(qū)域間的音量差值(各個(gè)揚(yáng)聲器的音量差值)。
調(diào)整量校正單元185將調(diào)整量已校正的控制信息提供給輸出控制 單元186。輸出控制單元186基于所提供的控制信息來控制從各個(gè)揚(yáng) 聲器輸出的音頻數(shù)據(jù)的音量。
接下來,參考圖18中的流程圖,將描述圖14的步驟S74中音頻 輸出控制單元54所執(zhí)行的音頻輸出控制處理的流程示例。
在步驟Slll中區(qū)域指定單元181參考每個(gè)所提供區(qū)域的差值平均 值,并指定具有最大差值平均值的區(qū)域。在步驟S112中,音量調(diào)整單 元182基于步驟S111處理中的指定結(jié)果來生成用于調(diào)整輸出音頻的控 制信息,以便使揚(yáng)聲器之間出現(xiàn)輸出音頻的音量差異。
在步驟S113中,音量確認(rèn)單元183基于音頻數(shù)據(jù)的每個(gè)通道來指 定音頻輸出區(qū)域。在步驟S114中,比較單元184對(duì)步驟S111處理中 所指定的具有最大差值平均值的區(qū)域與步驟S113處理中所指定的音 頻輸出區(qū)域進(jìn)行比較。
在步驟S115中,確認(rèn)單元184確定這兩個(gè)區(qū)域是否匹配,并在所 做出的確定是它們匹配的情況下,處理繼續(xù)到步驟S116。在步驟S116 中,調(diào)整量校正單元185校正調(diào)整量,以便使音量差值要比步驟S112 中所設(shè)置的默認(rèn)值大。在結(jié)束步驟S116處理的基礎(chǔ)上,調(diào)整量校正單 元185將處理繼續(xù)到步驟S118。
同樣,在所做出的確定是兩個(gè)區(qū)域不匹配的情況下,比較單元184 將處理繼續(xù)到步驟S117。在步驟S117中,調(diào)整量校正單元185校正 調(diào)整量,從而音量差值要比步驟S112中所設(shè)置的默認(rèn)值小。在結(jié)束步 驟S117處理的基礎(chǔ)上,調(diào)整量校正單元185將處理繼續(xù)到步驟S118 中。
在步驟S118中,輸出控制單元186基于調(diào)整量已校正的控制信息 來調(diào)整每個(gè)揚(yáng)聲器輸出音頻的音量。在步驟S118處理結(jié)束的基礎(chǔ)上, 音頻輸出控制單元54結(jié)束音頻輸出控制處理,將處理返回到圖14中 的步驟S74,并執(zhí)行S76及其后面的處理。
因此,通過校正由顯示圖像分析所確定的音頻輸出控制,使用音 頻數(shù)據(jù)的分析結(jié)果,顯示裝置能夠準(zhǔn)確地執(zhí)行音頻輸出控制,并能夠 輸出音頻,以便提高真實(shí)感。
注意,顯示裝置可以配置為不僅僅是輸出音頻的揚(yáng)聲器可以切換, 而且音頻的輸出位置也可以由音頻處理來進(jìn)行偽控制。因此,顯示裝 置能夠給用戶提供一種感覺,即沒有對(duì)音頻輸出位置上的揚(yáng)聲器的放 置位置和數(shù)量進(jìn)行限制的情況下,從任意位置輸出音頻。
同樣,通過根據(jù)用戶收看/收聽顯示裝置上的內(nèi)容的位置來控制每 個(gè)揚(yáng)聲器的音頻輸出定時(shí)(延遲量),實(shí)際上可以改變輸出位置(可 以改變用戶所感受的音頻輸出位置)。
圖19是示出這樣一種情況中的顯示裝置的結(jié)構(gòu)示例的框圖。在圖 19中,顯示裝置200除了具有顯示裝置IO的結(jié)構(gòu)之外,還具有用戶 位置對(duì)應(yīng)處理單元201。作為遙控器上所提供的位置傳感器的輸出信 息,將通過用戶指令接收器42從遙控器中隨同用戶指令命令一起提供 的遙控器位置信息提供給用戶位置對(duì)應(yīng)處理單元201。
用戶位置對(duì)應(yīng)處理單元201基于用戶位置對(duì)應(yīng)處理單元201的位 置信息來檢測(cè)充當(dāng)顯示裝置200基準(zhǔn)的遙控器位置,這被配置為用戶 位置。然后,用戶位置對(duì)應(yīng)處理單元201基于用戶位置來計(jì)算每個(gè)揚(yáng) 聲器輸出音頻的延遲量,并在將音頻輸出位置控制單元37所提供的音 頻數(shù)據(jù)僅僅延遲該延遲量的基礎(chǔ)上,將音頻數(shù)據(jù)提供給音頻輸出單元 39,并輸出該音頻。換句話說,用戶位置對(duì)應(yīng)處理單元201基于用戶 位置(用戶離顯示裝置的對(duì)應(yīng)位置)來延遲音頻輸出。
圖20是示出用戶位置對(duì)應(yīng)處理單元201詳細(xì)結(jié)構(gòu)示例的框圖。在 圖20中,用戶位置對(duì)應(yīng)處理單元201具有遙控器位置檢測(cè)單元211、 延遲量計(jì)算單元212和延遲量控制單元213。
遙控器位置檢測(cè)單元211基于遙控器所提供的位置傳感器的輸出 信息來檢測(cè)作為用戶位置的遙控器位置,并將該信息提供給延遲量計(jì) 算單元212。延遲量計(jì)算單元212基于遙控器位置檢測(cè)單元211所提 供的用戶位置信息來計(jì)算每個(gè)揚(yáng)聲器輸出音頻的延遲量,并將其提供 給延遲控制單元213。延遲控制單元213在僅僅延遲該延遲量之后, 將音頻輸出位置控制單元37所提供的、每個(gè)揚(yáng)聲器的音頻數(shù)據(jù)輸出定 時(shí)提供給音頻輸出單元39,并輸出該音頻。
接下來,作為一個(gè)特定處理流程的例子,參考圖21的流程圖,將 描述用戶位置對(duì)應(yīng)處理單元201所執(zhí)行的用戶位置對(duì)應(yīng)處理流程的例 子。
在步驟S131中,遙控器位置檢測(cè)單元211通過檢測(cè)遙控器的位置 來檢測(cè)用戶位置。在步驟S132中,延遲量計(jì)算單元212基于用戶位置 來計(jì)算各個(gè)揚(yáng)聲器輸出音頻的延遲量。在步驟S133中,延遲控制單元 213將各個(gè)揚(yáng)聲器輸出的音頻僅僅延遲所計(jì)算的延遲量。在步驟S134 中,用戶位置對(duì)應(yīng)處理單元201確定用戶位置對(duì)應(yīng)處理是否結(jié)束,并 在所做出的確定是沒有結(jié)束的情況下,處理返回到步驟S131,并重復(fù) 其后的處理。同樣,在步驟S134中所做出的確定是結(jié)束了用戶位置對(duì) 應(yīng)處理的情況下,用戶位置對(duì)應(yīng)于處理單元201結(jié)束用戶位置對(duì)應(yīng)處 理。
因此,通過基于用戶位置控制音頻輸出的定時(shí),顯示裝置能夠使 輸出的音頻讓用戶強(qiáng)烈地感覺到該音頻是從對(duì)應(yīng)于顯示圖像的位置輸 出的,并且提高了真實(shí)感。
同樣,顯示裝置的揚(yáng)聲器可以配置為從顯示裝置上可拆卸的。圖 22是示出具有可拆卸揚(yáng)聲器的顯示裝置示例的透視圖。
在圖22中,顯示裝置231具有當(dāng)圖像顯示屏面向前面時(shí)、在上下 左右四側(cè)形成的用于安置揚(yáng)聲器的多個(gè)凹口部分。揚(yáng)聲器233A和 233B是可從顯示裝置231上可拆卸的揚(yáng)聲器。當(dāng)不需要描述彼此分離 的揚(yáng)聲器233A和233B時(shí),這些將表示為揚(yáng)聲器233。凸起部分 設(shè)置在揚(yáng)聲器233上,示出在揚(yáng)聲器233B上。凸起部分234對(duì)應(yīng)于 顯示裝置231的凹口部分232,并可以通過將凸起部分234安裝在顯 示裝置231的凹口部分來將揚(yáng)聲器233安置在顯示器231上,從而將 揚(yáng)聲器233固定在顯示裝置231的側(cè)面上。
同樣,為了將固定在顯示裝置231上的揚(yáng)聲器233從顯示裝置231 上分離出來,用戶可以通過把揚(yáng)聲器233拉出來而將揚(yáng)聲器233從顯 示裝置231上分離出來。
注意,凹口部分232和凸起部分234中的每個(gè)在彼此對(duì)應(yīng)的位置 上具有一個(gè)電極,以及在將揚(yáng)聲器233固定在顯示裝置231上的狀態(tài) 中,將顯示裝置231的內(nèi)電路與揚(yáng)聲器233進(jìn)行電連接,并通過揚(yáng)聲
器233獲得通過顯示裝置231輸出的音頻信號(hào),且輸出對(duì)應(yīng)于該音頻 信號(hào)的音頻。
進(jìn)一步地,顯示裝置231上所提供的多個(gè)凹口部分232具有彼此 相同的形狀,且揚(yáng)聲器233可以安置在任何凹口部分232上。換句話 說,與凹口部分232數(shù)目相同數(shù)目的揚(yáng)聲器233可以安置在顯示裝置 231上。
同樣,如圖23所示,顯示裝置231顯示用于引導(dǎo)揚(yáng)聲器位置設(shè)置 輸入的菜單屏。如圖23所示的顯示裝置231具有顯示的輸入引導(dǎo)圖像 241。用戶根據(jù)輸入引導(dǎo)圖像241,輸入揚(yáng)聲器實(shí)際配置的揚(yáng)聲器位置, 或在準(zhǔn)備好的模式中選擇實(shí)際放置的最接近的模式。顯示裝置231基 于涉及揚(yáng)聲器放置的輸入信息來確定對(duì)于顯示圖像區(qū)域的分割方法, 存儲(chǔ)該設(shè)置,以及將該設(shè)置用于音頻輸出位置控制。
圖24是示出在這樣一種情況中顯示裝置231內(nèi)部結(jié)構(gòu)示例的框 圖。在圖24中,顯示裝置231基本上具有與顯示裝置IO相同的結(jié)構(gòu), 但是也具有除了顯示裝置10的結(jié)構(gòu)之外的區(qū)域設(shè)置單元251。
區(qū)域設(shè)置單元251將輸入引導(dǎo)圖像241的圖像數(shù)據(jù)提供給圖像處 理單元35,并在顯示單元38上顯示該圖像。用戶基于輸入引導(dǎo)圖像 241來操作遙控器,并輸入關(guān)于揚(yáng)聲器位置的信息。在用戶指令接收 器42獲得用戶指令的基礎(chǔ)上,將其提供給區(qū)域設(shè)置單元251。區(qū)域設(shè) 置單元251基于用戶輸入的有關(guān)揚(yáng)聲器位置的信息來執(zhí)行區(qū)域設(shè)置, 并將該設(shè)置信息提供給音頻輸出位置控制單元37。音頻輸出位置控制 單元37基于該設(shè)置將顯示圖像分割為對(duì)應(yīng)于揚(yáng)聲器配置的多個(gè)區(qū)域。
圖25是示出區(qū)域設(shè)置單元251詳細(xì)結(jié)構(gòu)示例的框圖。在圖25中, 區(qū)域設(shè)置單元251具有輸入引導(dǎo)圖像顯示控制單元261、用戶輸入接 收處理單元262、區(qū)域設(shè)置選擇單元263和分割表存儲(chǔ)單元264。
輸入引導(dǎo)圖像顯示控制單元261將輸入引導(dǎo)圖像241提供給圖像 處理單元35。在用戶輸入接收處理單元262通過用戶指令接收單元42 獲得根據(jù)輸入引導(dǎo)圖像241而輸入的用戶輸入的基礎(chǔ)上,從用戶輸入 中提取作為揚(yáng)聲器位置信息的揚(yáng)聲器位置信息,并將其提供給區(qū)域設(shè)
置選擇單元263。區(qū)域設(shè)置選擇單元263基于與揚(yáng)聲器位置模式相關(guān) 聯(lián)的分割表和存儲(chǔ)在分割表存儲(chǔ)單元264中的區(qū)域分割模式,來選擇 對(duì)應(yīng)于所提供揚(yáng)聲器位置信息的區(qū)域分割模式,并將其作為區(qū)域設(shè)置 提供給音頻輸出位置控制單元37。
參考圖26的流程圖,將描述區(qū)域設(shè)置單元251所執(zhí)行的區(qū)域設(shè)置 處理的特定處理流程例子。
在步驟S151中,輸入引導(dǎo)圖像顯示控制單元261在顯示單元38 上顯示輸入引導(dǎo)圖像241。在步驟S152中,用戶輸入接收處理單元262 接收用戶輸入。用戶輸入接收處理單元262確定是否接收了用戶輸入, 并將流程返回到步驟S152中并重復(fù)執(zhí)行其后的處理,直到所做出的確 定是已經(jīng)接收該輸入為止。在步驟S153中確定已經(jīng)接收了用戶輸入的 基礎(chǔ)上,用戶輸入接收處理單元262將處理繼續(xù)到步驟S154。在步驟 S154中,區(qū)域設(shè)置選擇單元263基于揚(yáng)聲器位置和分割表來選擇最合 適的區(qū)域設(shè)置。在步驟S154中的處理結(jié)束的基礎(chǔ)上,區(qū)域設(shè)置單元 251結(jié)束區(qū)域設(shè)置處理。
通過如上述那樣設(shè)置區(qū)域,即使采用在任意位置安裝任意數(shù)目的 揚(yáng)聲器,顯示裝置都能夠輸出對(duì)應(yīng)于顯示圖像的音頻,從而提高真實(shí) 感。
注意,通過確認(rèn)顯示裝置231上的每個(gè)凹口部分232上所提供的 揚(yáng)聲器連接端的連接狀態(tài),如圖23所示,在沒有用戶輸入的情況下, 顯示裝置231能夠自動(dòng)獲得揚(yáng)聲器233的布置。
圖27是示出這樣一種顯示裝置231的內(nèi)部結(jié)構(gòu)例的框圖。在圖 27中,顯示裝置231基本上具有與顯示裝置IO相同的結(jié)構(gòu),但是也 具有除了顯示裝置10的結(jié)構(gòu)之外的區(qū)域設(shè)置單元301。
區(qū)域設(shè)置單元301獲取連接信息,該連接信息表示揚(yáng)聲器233已 經(jīng)與音頻輸出單元39連接。例如,區(qū)域設(shè)置單元301將預(yù)定信號(hào)發(fā)送 到每個(gè)凹口單元232上的揚(yáng)聲器連接端,或測(cè)量揚(yáng)聲器連接端的電壓, 并因此基于響應(yīng)信號(hào)或電壓等來確認(rèn)揚(yáng)聲器的連接狀態(tài)。然后區(qū)域設(shè) 置單元301基于所檢測(cè)到的揚(yáng)聲器位置來執(zhí)行區(qū)域設(shè)置,并將該區(qū)域
設(shè)置信息提供給音頻輸出位置控制單元37。音頻輸出位置控制單元37 基于所執(zhí)行的設(shè)置來將顯示圖像分割為對(duì)應(yīng)于揚(yáng)聲器配置的多個(gè)區(qū) 域。
圖28是示出區(qū)域設(shè)置單元301詳細(xì)結(jié)構(gòu)示例的框圖。在圖28中, 區(qū)域設(shè)置單元301具有連接確認(rèn)單元311、揚(yáng)聲器位置存儲(chǔ)單元312、 區(qū)域設(shè)置選擇單元313以及分割表存儲(chǔ)單元314。
連接確認(rèn)單元311從每個(gè)揚(yáng)聲器連接端獲得連接信息,并確認(rèn)揚(yáng) 聲器的連接狀態(tài)。然后,在檢測(cè)揚(yáng)聲器的基礎(chǔ)上,連接確認(rèn)單元311 將表示揚(yáng)聲器位置的揚(yáng)聲器位置信息提供給揚(yáng)聲器位置存儲(chǔ)單元312。 揚(yáng)聲器位置存儲(chǔ)單元312存儲(chǔ)所有檢測(cè)到的揚(yáng)聲器位置,并根據(jù)需要 將這些位置信息提供給區(qū)域設(shè)置選擇單元313。
在確認(rèn)了連接確認(rèn)單元311與所有揚(yáng)聲器連接端連接的基礎(chǔ)上, 區(qū)域設(shè)置選擇單元313獲得表示已檢測(cè)揚(yáng)聲器位置的揚(yáng)聲器位置信 息,并從分割表存儲(chǔ)單元314中獲得與揚(yáng)聲器位置模式相關(guān)聯(lián)的分割 表以及區(qū)域分割模式。區(qū)域設(shè)置選擇單元313使用該分割表來選擇對(duì) 應(yīng)于揚(yáng)聲器布置的分割模式,并作為區(qū)域設(shè)置將其提供給音頻輸出位 置控制單元37。
參考圖29的流程圖,將描述區(qū)域設(shè)置單元301所執(zhí)行的區(qū)域設(shè)置 處理的特定處理流程。
在步驟S171中,連接確認(rèn)單元311選擇未處理的揚(yáng)聲器端。在步 驟S172中,連接確認(rèn)單元311確認(rèn)揚(yáng)聲器與所選擇揚(yáng)聲器連接端的連 接。在步驟S173中,連接確認(rèn)單元311確定揚(yáng)聲器是否已經(jīng)被檢測(cè), 并在所做出的確定是揚(yáng)聲器被檢測(cè)的情況下,處理繼續(xù)到步驟Sl74。 在步驟S174中,揚(yáng)聲器位置存儲(chǔ)單元312存儲(chǔ)所檢測(cè)揚(yáng)聲器的位置, 并將處理繼續(xù)到步驟S175。同樣,在步驟S173中所做出的確定是沒 有檢測(cè)揚(yáng)聲器的情況中,連接確認(rèn)單元311跳過步驟S174,并將處理 繼續(xù)到步驟S175。在步驟S175中,連接確認(rèn)單元311確定所有揚(yáng)聲 器連接端是否都被確認(rèn),并在所做出的確定是存在未處理?yè)P(yáng)聲器連接 端的情況下,處理返回到步驟S171,并重復(fù)其后的處理。同樣,在步
驟S175中所做出的確定是所有的連接端都已經(jīng)被確認(rèn)的情況下,連接 確認(rèn)單元311將處理繼續(xù)到步驟S176。在步驟S176中,區(qū)域設(shè)置選 擇單元313基于揚(yáng)聲器位置和分割表來選擇區(qū)域設(shè)置,并在將其提供 給音頻輸出位置控制單元37的基礎(chǔ)上,結(jié)束區(qū)域設(shè)置處理。
如上述地檢測(cè)揚(yáng)聲器并設(shè)置區(qū)域的顯示裝置,用戶能夠更容易地 執(zhí)行區(qū)域設(shè)置。換句話說,在不需要復(fù)雜操作的情況下,顯示裝置能 夠輸出對(duì)應(yīng)于所顯示圖像的、具有較強(qiáng)真實(shí)感的音頻。
注意,為了檢測(cè)所連接的揚(yáng)聲器,可以提供傳感器或開關(guān)來檢測(cè) 揚(yáng)聲器233連接到顯示裝置231上的每個(gè)凹口部分232。在這情況中, 區(qū)域設(shè)置單元301從這樣的傳感器或開關(guān)中獲得輸出信息,并檢測(cè)揚(yáng) 聲器。
上述一系列處理可以由硬件來執(zhí)行,或可以由軟件來執(zhí)行。在這 種情況中,例如,音頻輸出位置控制單元37、用戶位置對(duì)應(yīng)處理單元 201、區(qū)域設(shè)置單元251或區(qū)域設(shè)置單元301可以^L配置為個(gè)人計(jì)算機(jī), 如圖30所示。
在圖30中,個(gè)人計(jì)算機(jī)400的CPU (中夾處理單元)根據(jù)存儲(chǔ) 在ROM(只讀存儲(chǔ)器)402中的程序、或從存儲(chǔ)單元413裝載到RAM (隨機(jī)存取存儲(chǔ)器)的程序來執(zhí)行各種處理。RAM 403也可以存儲(chǔ)必 要數(shù)據(jù),以用于CPU401執(zhí)行各種處理。
CPU 401、 ROM 402和RAM 403相互之間通過總線404進(jìn)行連 接。該總線404也可以連接到輸入/輸出接口 410上。
輸入/輸出接口 410也可以連接到諸如鍵盤、鼠標(biāo)等這樣的輸入單 元411、諸如CRT (陰極射線管)、LCD (液晶顯示器)等這樣的顯 示器、諸如揚(yáng)聲器這樣的輸出單元412、配置為硬盤等這樣的存儲(chǔ)單 元、和配置有調(diào)制解調(diào)器等這樣的通信單元414上。通信單元4"通 過包括互連網(wǎng)在內(nèi)的網(wǎng)絡(luò)來執(zhí)行通信處理。
如需要,輸入/輸出接口 410也可以連接到驅(qū)動(dòng)器415上,適當(dāng)安 裝諸如磁盤、光盤、光磁盤、半導(dǎo)體存儲(chǔ)器等這樣的可移動(dòng)介質(zhì)421, 并且如果需要,從它們中讀出的計(jì)算機(jī)程序被安裝在存儲(chǔ)單元"3中。
在用軟件執(zhí)行上述一 系列處理的情況中,從網(wǎng)絡(luò)或存儲(chǔ)媒體中安 裝配置軟件的程序。
存儲(chǔ)媒體不限制在由可移動(dòng)介質(zhì)來配置,諸如磁盤(包括軟盤)、
光盤(包括CD-ROM (光盤只讀存儲(chǔ)器)或DVD (數(shù)字化多用盤))、 光磁盤(包括MD (迷你盤)(注冊(cè)商標(biāo)))或半導(dǎo)體存儲(chǔ)器,如圖 30所示,它們是與裝置主單元分開進(jìn)行分配,這是出于將程序分配給 用戶的目的考慮,相反,存儲(chǔ)媒體也可以配置有包括在其中記錄程序 的ROM 402或存儲(chǔ)單元413中的硬盤,以便將其分配給已經(jīng)建立在 裝置主單元上中的用戶。
注意,按照本發(fā)明的說明書,記錄在記錄媒體上的程序中所述步 驟當(dāng)然包括按照所描述規(guī)則的時(shí)間順序所執(zhí)行的處理,而且還包括不 按時(shí)間順序而是平行或獨(dú)立執(zhí)行的處理。
同樣,按照本發(fā)明的說明書,術(shù)語"系統(tǒng)"指的是由多個(gè)裝置所配 置的整個(gè)設(shè)備。
本領(lǐng)域技術(shù)人員應(yīng)當(dāng)明白,在后附的權(quán)利要求及其等價(jià)范圍之內(nèi), 根據(jù)設(shè)計(jì)需要及其它因素可以做出各種改進(jìn)、組合、子組合和改變。
權(quán)利要求
1.一種用于顯示圖像的圖像顯示裝置,包括用于顯示圖像的圖像顯示部件;用于從對(duì)應(yīng)于圖像顯示部件所顯示圖像的多個(gè)位置中輸出音頻的音頻輸出部件;以及用于分析圖像、根據(jù)圖像內(nèi)容控制音頻輸出部件、并且選擇從其輸出音頻的位置的音頻輸出位置控制部件,其中,所述音頻輸出位置控制部件進(jìn)一步包括屏幕區(qū)域分割部件,用于將圖像顯示部件的顯示屏分割為預(yù)定數(shù)量的多個(gè)區(qū)域;差值平均值計(jì)算部件,用于對(duì)屏幕區(qū)域分割部件所分割的每個(gè)區(qū)域的、具有預(yù)定特征且其像素值預(yù)先確定的每個(gè)像素,計(jì)算幀間亮度值的差值的平均值;以及音頻輸出控制部件,基于差值平均值計(jì)算部件所計(jì)算出的差值平均值來控制音頻輸出部件并選擇輸出音頻的位置。
2、 如權(quán)利要求1所述的圖像顯示裝置,其中所述音頻輸出部件進(jìn) 一步包括多個(gè)揚(yáng)聲器;以及其中所述音頻輸出位置控制部件控制音頻輸出部件來選擇從 其輸出音頻的揚(yáng)聲器。
3、 如權(quán)利要求1所述的圖像顯示裝置,其中所述音頻是包括單通 道的音頻。
4、 如權(quán)利要求1所述的圖像顯示裝置,其中所述音頻是包括多通 道的音頻。
5、 如權(quán)利要求4所述的圖像顯示裝置,所述音頻輸出位置控制部 件進(jìn)一步包括差值平均值計(jì)算部件,用于對(duì)分配到圖像的多個(gè)區(qū)域中的每個(gè)區(qū) 域的、具有預(yù)定特征且其像素值預(yù)先確定的每個(gè)像素來計(jì)算差值平均 值,該差值平均值是幀間亮度值的差值的平均值; 音量確認(rèn)部件,用于確認(rèn)多通道的音量以指定音頻輸出位置;差值平均值校正部件,基于由音量確認(rèn)部件已確認(rèn)并指定音量的 音頻輸出位置來校正差值平均值計(jì)算部件所計(jì)算的差值平均值;區(qū)域指定部件,基于差值平均值校正部件所校正的差值平均值來 指定用于輸出音頻的區(qū)域;以及音頻輸出控制部件,用于控制音頻輸出部件,以便從對(duì)應(yīng)于區(qū)域 指定部件所指定區(qū)域的位置輸出音頻。
6、 如權(quán)利要求4所述的圖像顯示裝置,所述音頻輸出位置控制部 件進(jìn)一步包括差值平均值計(jì)算部件,用于對(duì)分配到圖像的多個(gè)區(qū)域中的每個(gè)區(qū) 域的、具有預(yù)定特征且其像素值預(yù)先確定的每個(gè)像素來計(jì)算差值平均 值,該差值平均值是幀間亮度值的差值的平均值;區(qū)域指定部件,基于差值平均值計(jì)算部件所計(jì)算的差值平均值來 指定用于輸出音頻的區(qū)域;音量調(diào)整部件,基于區(qū)域指定部件所指定的音頻輸出區(qū)域,來確 定從音頻輸出部件所輸出的音頻音量的調(diào)整量;音量確認(rèn)部件,用于確認(rèn)多通道的音量以指定音頻輸出位置;比較部件,用于對(duì)區(qū)域指定部件所指定的音頻輸出區(qū)域與音頻輸 出位置進(jìn)行比較,在所述音頻輸出位置中,音量由音量確認(rèn)部件所確 認(rèn)并指定;調(diào)整量校正部件,基于比較部件的比較結(jié)果,校正由音量調(diào)整部 件所確定的音頻音量的調(diào)整量;以及音頻輸出控制部件,用于控制音頻輸出部件,以便基于調(diào)整量校 正部件所校正的音量調(diào)整量來調(diào)整音頻音量。
7、 如權(quán)利要求1所述的圖像顯示裝置,進(jìn)一步包括用戶位置對(duì)應(yīng) 處理部件,其根據(jù)用戶的位置,檢測(cè)用戶收看/收聽圖像和音頻的位置, 并控制音頻輸出部件的音頻輸出定時(shí)的延遲量。
8、 如權(quán)利要求1所述的圖像顯示裝置,其中所述音頻輸出部件具 有多個(gè)可拆卸揚(yáng)聲器;以及 其中所述圖像顯示裝置進(jìn)一步包括區(qū)域設(shè)置部件,根據(jù)連接到其 上的揚(yáng)聲器的位置來設(shè)置由屏幕區(qū)域分割部件所分割的區(qū)域。
9、 一種用于在圖像顯示裝置上顯示圖像的圖像顯示方法,包括步驟顯示圖像的顯示步驟;從對(duì)應(yīng)于顯示圖像的多個(gè)位置中輸出音頻的音頻輸出步驟;以及分析圖像、根據(jù)圖像內(nèi)容控制音頻輸出、以及選擇從其輸出音頻 的位置的音頻輸出位置控制步驟;其中,所述音頻輸出位置控制步驟進(jìn)一步包括將顯示圖像的顯示屏分割為預(yù)定數(shù)量的多個(gè)區(qū)域的屏幕區(qū)域分割 步驟;對(duì)屏幕區(qū)域分割步驟所分割的每個(gè)區(qū)域的、具有預(yù)定特征且其像 素值預(yù)先確定的每個(gè)像素,計(jì)算幀間亮度值的差值的平均值的差值平均值計(jì)算步驟;以及基于差值平均值計(jì)算步驟所計(jì)算出的差值平均值來控制音頻輸出 并選擇輸出音頻的位置的音頻輸出控制步驟。
10、 如權(quán)利要求9所述的圖像顯示方法,其中所述音頻是包括單 通道的音頻。
11、 如權(quán)利要求9所述的圖像顯示方法,其中所述音頻是包括多 通道的音頻。
12、 如權(quán)利要求11所述的圖像顯示方法,所述音頻輸出位置控制 步驟進(jìn)一步包括對(duì)分配到圖像的多個(gè)區(qū)域中的每個(gè)區(qū)域的、具有預(yù)定特征且其像 素值預(yù)先確定的每個(gè)像素來計(jì)算差值平均值的差值平均值計(jì)算步驟, 該差值平均值是幀間亮度值的差值的平均值;確認(rèn)多通道的音量以指定音頻輸出位置的音量確認(rèn)步驟;基于由音量確認(rèn)步驟已確認(rèn)并指定音量的音頻輸出位置來校正差 值平均值計(jì)算步驟所計(jì)算的差值平均值的差值平均值校正步驟;基于差值平均值校正步驟所校正的差值平均值來指定用于輸出音 頻的區(qū)域的區(qū)域指定步驟;以及用于控制音頻輸出步驟,以便從對(duì)應(yīng)于區(qū)域指定步驟所指定區(qū)域 的位置輸出音頻的音頻輸出控制步驟。
13、 如權(quán)利要求11所述的圖像顯示方法,所述音頻輸出位置控制 步驟進(jìn)一步包括對(duì)分配到圖像的多個(gè)區(qū)域中的每個(gè)區(qū)域的、具有預(yù)定特征且其像 素值預(yù)先確定的每個(gè)像素來計(jì)算差值平均值的差值平均值計(jì)算步驟, 該差值平均值是幀間亮度值的差值的平均值;基于差值平均值計(jì)算步驟所計(jì)算的差值平均值來指定用于輸出音 頻的區(qū)域的區(qū)域指定步驟;基于區(qū)域指定步驟所指定的音頻輸出區(qū)域,來確定從音頻輸出步 驟所輸出的音頻音量的調(diào)整量的音量調(diào)整步驟;確認(rèn)多通道的音量以指定音頻輸出位置的音量確認(rèn)步驟;對(duì)區(qū)域指定步驟所指定的音頻輸出區(qū)域與音頻輸出位置進(jìn)行比較 的比較步驟,在所述音頻輸出位置中,音量由音量確認(rèn)步驟所確認(rèn)并 指定;基于比較步驟的比較結(jié)果,校正由音量調(diào)整步驟所確定的音頻音 量的調(diào)整量的調(diào)整量校正步驟;以及控制音頻輸出步驟,以便基于調(diào)整量校正步驟所校正的音量調(diào)整 量來調(diào)整音頻音量的音頻輸出控制步驟。
14、 如權(quán)利要求9所述的圖像顯示方法,進(jìn)一步包括用戶位置對(duì) 應(yīng)處理步驟,其根據(jù)用戶的位置,檢測(cè)用戶收看/收聽圖像和音頻的位 置,并控制音頻輸出步驟的音頻輸出定時(shí)的延遲量。
全文摘要
本發(fā)明涉及圖像顯示裝置、方法和程序,具體公開了一種用于顯示圖像的圖像顯示裝置,包括圖像顯示單元,用于顯示圖像;音頻輸出單元,用于從對(duì)應(yīng)于圖像顯示單元所顯示圖像的多個(gè)位置中輸出音頻;以及音頻輸出位置控制單元,用于分析圖像、根據(jù)圖像內(nèi)容控制音頻輸出單元和選擇從其輸出音頻的位置。
文檔編號(hào)H04R3/00GK101370107SQ20081016870
公開日2009年2月18日 申請(qǐng)日期2006年10月17日 優(yōu)先權(quán)日2005年10月17日
發(fā)明者山田直秀, 渡邊義教, 近藤哲二郎 申請(qǐng)人:索尼株式會(huì)社