專利名稱：一種音頻信號處理的方法及電子設備的制作方法
技術(shù)領域：
本發(fā)明涉及信號處理領域，尤其涉及一種音頻信號處理的方法及電子設備。
背景技術(shù)：
目前的智能電視功能越來越多，不僅有高清媒體播放，網(wǎng)絡瀏覽等功能，也可以引入大量原先在PC (Personal Computer,個人計算機)上才可以使用的功能，比如多人視頻聊天等。在使用這些互聯(lián)網(wǎng)應用時，和PC上不同的一點是，用戶經(jīng)常在觀看電視的節(jié)目的同時，通過基于畫中畫或者帶透明度支持的多窗口顯示功能，實現(xiàn)在觀看電視節(jié)目的同時進行網(wǎng)絡視頻會議或者網(wǎng)絡聊天。發(fā)明人在發(fā)明過程中，發(fā)現(xiàn)現(xiàn)有技術(shù)中雖然可以解決多個畫面或者視頻的同時瀏覽或者播出，但是在解決多個節(jié)目的聲音處理上存在很多問題。現(xiàn)有技術(shù)中針對多個畫面的聲音處理目前主要有以下2種解決方案，具體的解決方案和存在的問題如下:第一種，允許2個音軌同時輸出，將兩個多媒體應用(比如電視與聊天)的聲音做混音后同時輸出；這種解決方案的缺點是容易使用戶混淆聲音，造成每個節(jié)目源的收聽效果都不好。第二種，只將兩個多媒體應用畫面中的一路聲音輸出，這種解決方案的缺點是使用戶無法收聽另一路畫面的聲音信息，只能看到相關的圖像信息，丟失語音信息。

發(fā)明內(nèi)容
本申請實施例提供了一種音頻信號處理的方法及電子設備，解決了現(xiàn)有技術(shù)中在針對多個畫面的聲音處理上節(jié)目源的收聽效果不好或者丟失語音信息的問題。本申請實施例一提供了一種音頻信號處理的方法，應用于能接收至少兩路音頻數(shù)據(jù)的電子設備中，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，所述電子設備包括有聲音輸出單兀，所述方法包括:采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)；根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)；根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。其中，所述音頻文字轉(zhuǎn)換策略具體為:當所述第一路音頻數(shù)據(jù)對應的第一應用作為主應用時，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號；或者當所述第二路音頻數(shù)據(jù)對應的第二應用作為主應用時，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。第一種情 況:
當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)時，及當所述第一路音頻數(shù)據(jù)對應的第一應用為主應用時，識別所述第二路音頻數(shù)據(jù)，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上；或者將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上且停止播放所述第二路音頻數(shù)據(jù)。第二種情況:當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)時，及當所述第二路音頻數(shù)據(jù)對應的第二應用為主應用時，識別所述第一路音頻數(shù)據(jù)，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上；或者將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上且停止播放所述第一路音頻數(shù)據(jù)。第三種情況:當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)，及當所述第二路音頻數(shù)據(jù)對應的第二應用為主應用時，播放所述第二路音頻數(shù)據(jù)，且識別所述第一路音頻數(shù)據(jù)，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上并停止播放所述第一路音頻數(shù)據(jù)。第四種情況:當所述聲音輸出單元播放所述第二路音頻數(shù)據(jù)，及當所述第一路音頻數(shù)據(jù)對應的第一應用為主應用時，播放所述第一路音頻數(shù)據(jù)，且識別所述第二路音頻數(shù)據(jù)，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上并停止播放所述第二路音頻數(shù)據(jù)。第五種情況:當所述第一路音頻數(shù)據(jù)對應的第一應用作為主應用時，所述第一應用沒有音頻數(shù)據(jù)播放時，允許播放所述第二路音頻數(shù)據(jù)；或者當所述第二路音頻數(shù)據(jù)對應的第二應用作為主應用時，所述第二應用沒有音頻數(shù)據(jù)播放時，允許播放所述第一路音頻數(shù)據(jù)。本申請實施例二提供了一種電子設備，所述電子設備能接收至少兩路音頻數(shù)據(jù)，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，所述電子設備包括有聲音輸出單兀，所述電子設備還包括:采集單元，用于采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)；播放單元，用于根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)；轉(zhuǎn)換單元，用于根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。本申請通過以上一個或者多個實施例提供的技術(shù)方案，具有以下有益效果或者優(yōu)點之一:1、根據(jù)用戶選定的主副音軌的選擇，采用音軌切換的方式，播放主音軌的聲音文件；同時結(jié)合語音(或者聲音)識別并實時轉(zhuǎn)換成文字的方法，將副音軌上電視節(jié)目或者畫面中的語音(或者聲音)信號實時轉(zhuǎn)換成為文字信息在畫面上輸出，實現(xiàn)用戶在使用畫中畫或者多節(jié)目瀏覽時，可以收聽其中任意一路聲音，而另外一路節(jié)目的語音實時轉(zhuǎn)化為文字信息在畫面上插入或者滾動 播出；
2、通過實時判斷主音軌上是否處于無聲狀態(tài)，如果處于無聲狀態(tài)，在當前副音軌上有音頻輸出時可以插空播出副音軌的語音數(shù)據(jù)。


圖1為實施例1中音頻信號處理的方法流程圖；圖2為實施例1中主畫面和次畫面的圖；圖3為實施例1中將網(wǎng)絡視頻會議設置為主音軌時的情景圖；圖4為實施例1中將電視節(jié)目設置為主音軌時的情景圖；圖5為實施例2中電子設備的結(jié)構(gòu)圖。
具體實施例方式本申請實施例提供了一種音頻信號處理的方法及電子設備，解決了現(xiàn)有技術(shù)中在針對多個畫面的聲音處理上節(jié)目源的收聽效果不好或者丟失語音信息的問題。為了更好的理解上述技術(shù)方案，下面將結(jié)合附圖以及具體的實施方式對上述技術(shù)方案進行詳細的說明。實施例1如圖1所示，本申請實施例一提供了一種音頻信號處理的方法，應用于能接收至少兩路音頻數(shù)據(jù)的電子設備中，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，該電子設備包括有聲音輸出單元，所述方法包括:步驟101，采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)；步驟102，根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)；步驟103，根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。其中，所述音頻文字轉(zhuǎn)換策略具體為:當所述第一路音頻數(shù)據(jù)對應的第一應用作為主應用時，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號；或者當所述第二路音頻數(shù)據(jù)對應的第二應用作為主應用時，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。假設用戶在家中使用智能電視同時觀看電視節(jié)目和網(wǎng)絡聊天，電視節(jié)目頻道對應的音頻數(shù)據(jù)為第一路音頻數(shù)據(jù)，網(wǎng)絡聊天對應的音頻數(shù)據(jù)為第二路音頻數(shù)據(jù)，電視節(jié)目為第一應用，網(wǎng)絡聊天為第二應用。采用本申請實施例一提供的技術(shù)方案，會有以下5種情況。第一種情況:當所述聲音輸出單元同時播放第一路音頻數(shù)據(jù)(電視節(jié)目頻道對應的音頻數(shù)據(jù))和第二路音頻數(shù)據(jù)(網(wǎng)絡聊天對應的音頻數(shù)據(jù))時，及當電視節(jié)目頻道為主應用或者主聲道時，該主應用或者主聲道可以為智能電視系統(tǒng)預先設定，也可以為用戶當前設定，通過語音或聲音識別出第二路音頻數(shù) 據(jù)，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號在顯示畫面上滾動顯示；
或者為了達到更好的效果，將此時的同時播放第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)只播放第一路音頻數(shù)據(jù)，即只播放主應用或者主聲道的音頻數(shù)據(jù)，將第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上且停止播放所述第二路音頻數(shù)據(jù)。第二種情況:原理同第一種情況，當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)(電視節(jié)目頻道對應的音頻數(shù)據(jù))和第二路音頻數(shù)據(jù)(網(wǎng)絡聊天對應的音頻數(shù)據(jù))時，及當將網(wǎng)絡聊天設置為主應用時，通過語音或聲音識別技術(shù)識別出第一路音頻數(shù)據(jù)，將第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上；或者為了達到更好的效果，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上且停止播放所述第一路音頻數(shù)據(jù)。第三種情況:當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)(電視節(jié)目頻道對應的音頻數(shù)據(jù))，及當將網(wǎng)絡聊天設置為主應用時，播放第二路音頻數(shù)據(jù)(網(wǎng)絡聊天對應的音頻數(shù)據(jù))，且通過語音或聲音識別技術(shù)識別出第一路音頻數(shù)據(jù)，將第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上并停止播放所述第一路音頻數(shù)據(jù)。第四種情況:原理同第三種情況，當所述聲音輸出單元播放所述第二路音頻數(shù)據(jù)(網(wǎng)絡聊天對應的音頻數(shù)據(jù))，及當將電視節(jié)目設置為主應用時，播放第一路音頻數(shù)據(jù)(電視節(jié)目頻道對應的音頻數(shù)據(jù))，且通過語音或聲音識別技術(shù)識別出第二路音頻數(shù)據(jù)，將第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上并停止播放所述第二路音頻數(shù)據(jù)。第五種情況:當將電視節(jié)目作為主應用時，所述電視節(jié)目頻道沒有音頻數(shù)據(jù)輸出時，在采集到網(wǎng)絡聊天有音頻數(shù)據(jù)時，可以插空播放出網(wǎng)絡聊天的音頻數(shù)據(jù)；或者當將網(wǎng)絡聊天作為作為主應用時，所述網(wǎng)絡聊天沒有音頻數(shù)據(jù)輸出時，即網(wǎng)絡聊天應用處于無聲狀態(tài)時，可以插空播放電視節(jié)目頻道的音頻數(shù)據(jù)。下面舉一個用戶在家中使用智能電視在觀看球賽的同時參加一個網(wǎng)絡視頻會議的例子對上述技術(shù)方案進行詳細的闡述。1、如圖2所示，用戶開啟畫中畫功能，主畫面播放球賽，次畫面為網(wǎng)絡視頻會議。2、如圖3所示，選擇網(wǎng)絡視頻會議對應的音軌為主音軌，則將電視節(jié)目中球賽節(jié)目的主持人解說的聲音通過語音(或者聲音)識別并實時轉(zhuǎn)換成文字的方法轉(zhuǎn)化為文字信息在畫面上滾動播出。3、如圖4所不,選擇電視節(jié)目對應的音軌為主音軌,此時將聲音切換為球賽主持人的解說音通過聲音輸出單元播放，而將視頻會議畫面中每個人說話的聲音通過語音(或者聲音)識別并實時轉(zhuǎn)換成文字的方法轉(zhuǎn)化為文字信息在畫面上滾動播出。4、為了給用戶提供更大的便利，可以實時判斷主音軌上是否處于無聲狀態(tài)，如果是的話，在當前副音軌上有音頻輸出時也可以插空播出。實施例2如圖5所示，本申請實施例二提供了一種電子設備，所述電子設備能接收至少兩路音頻數(shù)據(jù)，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，所述電子設備包括有聲音輸出單元，所述 電子設備還包括:
采集單元201，用于采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)；播放單元202，用于根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)；轉(zhuǎn)換單元203，用于根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。本申請通過以上一個或者多個實施例提供的技術(shù)方案，具有以下有益效果或者優(yōu)點之一:1、根據(jù)用戶選定的主副音軌的選擇，采用音軌切換的方式，播放主音軌的聲音文件；同時結(jié)合語音(或者聲音)識別并實時轉(zhuǎn)換成文字的方法，將副音軌上電視節(jié)目或者畫面中的語音(或者聲音)信號實時轉(zhuǎn)換成為文字信息在畫面上輸出，實現(xiàn)用戶在使用畫中畫或者多節(jié)目瀏覽時，可以收聽其中任意一路聲音，而另外一路節(jié)目的語音實時轉(zhuǎn)化為文字信息在畫面上插入或者滾動播出；2、通過實時判斷主音軌上是否處于無聲狀態(tài)，如果處于無聲狀態(tài)，在當前副音軌上有音頻輸出時可以插空播出副音軌的語音數(shù)據(jù)。盡管已描述了本發(fā)明的優(yōu)選實施例，但本領域內(nèi)的技術(shù)人員一旦得知了基本創(chuàng)造性概念，則可對這些實施例作出另外的變更和修改。所以，所附權(quán)利要求意欲解釋為包括優(yōu)選實施例以及落入本發(fā)明范圍的所有變更和修改。顯然，本領域的技術(shù)人員可以對本發(fā)明進行各種改動和變型而不脫離本發(fā)明的精神和范圍。這樣，倘若本發(fā)明的這些修改和變型屬于本發(fā)明權(quán)利要求及其等同技術(shù)的范圍之內(nèi)，則本發(fā)明也意圖包含這 些改動和變型在內(nèi)。
權(quán)利要求
1.一種音頻信號處理的方法，應用于能接收至少兩路音頻數(shù)據(jù)的電子設備中，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，所述電子設備包括有聲音輸出單元，其特征在于，所述方法包括: 采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)； 根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)； 根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。
2.如權(quán)利要求1所述的方法，其特征在于，所述音頻文字轉(zhuǎn)換策略具體為: 當所述第一路音頻數(shù)據(jù)對應的第一應用作為主應用時，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號；或者 當所述第二路音頻數(shù)據(jù)對應的第二應用作為主應用時，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。
3.如權(quán)利要求2所述的方法，其特征在于: 當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)時，及當所述第一路音頻數(shù)據(jù)對應的第一應用為主應用時，識別所述第二路音頻數(shù)據(jù)，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上；或者 將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上且停止播放所述第二路音頻數(shù)據(jù)。
4.如權(quán)利要求2所述的方法，其特征在于: 當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)時，及當所述第二路音頻數(shù)據(jù)對應的第二應用為主應用時，識別所述第一路音頻數(shù)據(jù)，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上；或者 將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上且停止播放所述第一路音頻數(shù)據(jù)。
5.如權(quán)利要求2所述的方法，其特征在于: 當所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)，及當所述第二路音頻數(shù)據(jù)對應的第二應用為主應用時，播放所述第二路音頻數(shù)據(jù)，且識別所述第一路音頻數(shù)據(jù)，將所述第一路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上并停止播放所述第一路音頻數(shù)據(jù)。
6.如權(quán)利要求2所述的方法，其特征在于: 當所述聲音輸出單元播放所述第二路音頻數(shù)據(jù)，及當所述第一路音頻數(shù)據(jù)對應的第一應用為主應用時，播放所述第一路音頻數(shù)據(jù)，且識別所述第二路音頻數(shù)據(jù)，將所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號顯示在顯示畫面上并停止播放所述第二路音頻數(shù)據(jù)。
7.如權(quán)利要求2所述的方法，其特征在于: 當所述第一路音頻數(shù)據(jù)對應的第一應用作為主應用時，所述第一應用沒有音頻數(shù)據(jù)播放時，允許播放所述第二路音頻數(shù)據(jù)；或者 當所述第二路音頻數(shù)據(jù)對應的第二應用作為主應用時，所述第二應用沒有音頻數(shù)據(jù)播放時，允許播放所述第一路音頻數(shù)據(jù)。
8.一種電子設備，所述電子設備能接收至少兩路音頻數(shù)據(jù)，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，所述電子設備包括有聲音輸出單元，其特征在于，所述電子設備還包括: 采集單元，用于采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)； 播放單元，用于根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)； 轉(zhuǎn)換單元，用于根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所 述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。
全文摘要
本發(fā)明公開了一種音頻信號處理的方法及電子設備，應用于能接收至少兩路音頻數(shù)據(jù)的電子設備中，其中，所述至少兩路音頻數(shù)據(jù)包括第一路音頻數(shù)據(jù)和第二路音頻數(shù)據(jù)，所述電子設備包括有聲音輸出單元，所述方法包括采集所述第一路音頻數(shù)據(jù)和所述第二路音頻數(shù)據(jù)；根據(jù)一音頻播放策略，通過所述聲音輸出單元播放所述第一路音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)；根據(jù)一音頻文字轉(zhuǎn)換策略，識別所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)，以將所述第一音頻數(shù)據(jù)和/或所述第二路音頻數(shù)據(jù)轉(zhuǎn)換成文字信號。
文檔編號H04N21/439GK103220576SQ20121001821
公開日2013年7月24日 申請日期2012年1月19日 優(yōu)先權(quán)日2012年1月19日
發(fā)明者熊高琰, 陳劍峰 申請人:聯(lián)想(北京)有限公司