專利名稱：組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明大體上涉及組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)。
背景技術(shù)：
技術(shù)的進(jìn)步已產(chǎn)生更小且更強(qiáng)大的計(jì)算裝置。舉例來(lái)說(shuō)，當(dāng)前存在多種便攜式個(gè) 人計(jì)算裝置，包括無(wú)線計(jì)算裝置，例如便攜式無(wú)線電話、個(gè)人數(shù)字助理(PDA)和尋呼裝置，其體積小、重量輕且易于由用戶攜帶。更具體來(lái)說(shuō)，便攜式無(wú)線電話(例如，蜂窩式電話和因特網(wǎng)協(xié)議(IP)電話)可經(jīng)由無(wú)線網(wǎng)絡(luò)傳送語(yǔ)音和數(shù)據(jù)包。此外，許多這些無(wú)線電話包括并入于其中的其它類型的裝置。舉例來(lái)說(shuō)，無(wú)線電話還可包括數(shù)字靜態(tài)相機(jī)和數(shù)字視頻相機(jī)。而且，此些無(wú)線電話可處理可執(zhí)行指令，包括可用以接入因特網(wǎng)的軟件應(yīng)用程序(例如，網(wǎng)頁(yè)瀏覽器應(yīng)用程序)。另外，無(wú)線裝置可執(zhí)行三維(3D)應(yīng)用程序。在3D應(yīng)用程序中，通常使用至少兩個(gè)圖像傳感器從場(chǎng)景俘獲深度信息。來(lái)自兩個(gè)圖像傳感器的幀數(shù)據(jù)經(jīng)組合且處理以推斷出距離信息且用以建構(gòu)3D表示。組合來(lái)自所述傳感器中的每一者的圖像數(shù)據(jù)通常涉及執(zhí)行幀同步和線同步，此可導(dǎo)致同步和對(duì)準(zhǔn)挑戰(zhàn)。另外，當(dāng)源傳感器以不同頻率或相位提供數(shù)據(jù)時(shí)，濾波來(lái)自多個(gè)傳感器的圖像數(shù)據(jù)且交錯(cuò)此圖像數(shù)據(jù)可為更加復(fù)雜的。有效地同步來(lái)自多個(gè)傳感器的數(shù)據(jù)且有效地處理所述數(shù)據(jù)以減小總圖像處理系統(tǒng)成本和復(fù)雜性將為有利的。

發(fā)明內(nèi)容
在多個(gè)相機(jī)陣列應(yīng)用中，來(lái)自多個(gè)傳感器中的每一者的圖像數(shù)據(jù)將要在線水平下同步且處理。揭示一種用以組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的圖像處理系統(tǒng)，其中同步且處理來(lái)自第一圖像傳感器和第二圖像傳感器的圖像數(shù)據(jù)。通過(guò)同步且組合來(lái)自由所述第一圖像傳感器產(chǎn)生的第一數(shù)據(jù)流的第一數(shù)據(jù)與來(lái)自由所述第二圖像傳感器產(chǎn)生的第二數(shù)據(jù)流的第二數(shù)據(jù)來(lái)產(chǎn)生同步數(shù)據(jù)線。圖像信號(hào)處理器經(jīng)配置以處理從組合器接收的所述同步數(shù)據(jù)線且將經(jīng)處理幀輸出到顯示器。在一特定實(shí)施例中，揭示一種方法。所述方法包括將共同控制信號(hào)提供到待同步的多個(gè)圖像傳感器。所述方法進(jìn)一步包括接收來(lái)自所述多個(gè)圖像傳感器中的第一圖像傳感器的第一數(shù)據(jù)線，接收來(lái)自所述多個(gè)圖像傳感器中的第二圖像傳感器的第二數(shù)據(jù)線，以及組合所述第一數(shù)據(jù)線與所述第二數(shù)據(jù)線以產(chǎn)生同步數(shù)據(jù)線。
在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括第一輸入，所述第一輸入經(jīng)配置以經(jīng)由共同控制信號(hào)接收來(lái)自待同步的多個(gè)圖像傳感器中的第一圖像傳感器的第一數(shù)據(jù)線。所述設(shè)備進(jìn)一步包括第二輸入，所述第二輸入經(jīng)配置以接收來(lái)自所述多個(gè)圖像傳感器中的第二圖像傳感器的第二數(shù)據(jù)線；以及組合器，所述組合器耦合到所述第一輸入和所述第二輸入，其中所述組合器經(jīng)配置以組合所述第一數(shù)據(jù)線與所述第二數(shù)據(jù)線以產(chǎn)生同步數(shù)據(jù)線。在另一特定實(shí)施例中，揭示一種方法。所述方法包括將共同控制信號(hào)提供到多個(gè)圖像傳感器。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。所述方法進(jìn)一步包括接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出，組合來(lái)自所述多個(gè)圖像傳感器中的每一者的所述同步數(shù)據(jù)輸出以產(chǎn)生同步數(shù)據(jù)線，以及經(jīng)由圖像處理器的單一相機(jī)輸入將所述同步數(shù)據(jù)線提供到所述圖像處理器。在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括傳感器同步器，所述傳感器同 步器經(jīng)配置以將共同控制信號(hào)提供到多個(gè)圖像傳感器。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。所述設(shè)備進(jìn)一步包括組合器，所述組合器經(jīng)配置以組合從所述多個(gè)圖像傳感器中的每一者接收的同步數(shù)據(jù)輸出，以產(chǎn)生待經(jīng)由圖像處理器的單一相機(jī)輸入提供到所述圖像處理器的同步數(shù)據(jù)線。在另一特定實(shí)施例中，揭示一種方法。所述方法包括將共同控制信號(hào)提供到多個(gè)圖像傳感器。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。所述方法進(jìn)一步包括接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出。在另一特定實(shí)施例中，揭示一種方法。所述方法包括在多個(gè)圖像傳感器處接收共同控制信號(hào)。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。所述方法進(jìn)一步包括產(chǎn)生來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出。在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括傳感器同步器，所述傳感器同步器經(jīng)配置以將共同控制信號(hào)提供到多個(gè)圖像傳感器以使所述多個(gè)圖像傳感器產(chǎn)生圖像數(shù)據(jù)。所述設(shè)備進(jìn)一步包括傳感器數(shù)據(jù)接口，所述傳感器數(shù)據(jù)接口經(jīng)配置以接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出。在另一特定實(shí)施例中，揭示一種方法。所述方法包括在具有用于單一相機(jī)的輸入的圖像處理器處接收?qǐng)D像數(shù)據(jù)的多個(gè)線。所述圖像數(shù)據(jù)的每一線包括來(lái)自由第一相機(jī)俘獲的第一圖像的第一線數(shù)據(jù)和來(lái)自由第二相機(jī)俘獲的第二圖像的第二線數(shù)據(jù)。所述方法進(jìn)一步包括產(chǎn)生輸出幀，所述輸出幀具有對(duì)應(yīng)于所述第一圖像的線數(shù)據(jù)的第一區(qū)段且具有對(duì)應(yīng)于所述第二圖像的線數(shù)據(jù)的第二區(qū)段。所述第一區(qū)段和所述第二區(qū)段經(jīng)配置以用于產(chǎn)生三維(3D)圖像格式或3D視頻格式。在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括圖像處理器，所述圖像處理器具有用于單一相機(jī)的輸入。所述圖像處理器經(jīng)配置以經(jīng)由所述輸入接收?qǐng)D像數(shù)據(jù)的多個(gè)線。所述圖像數(shù)據(jù)的每一線包括來(lái)自由第一相機(jī)俘獲的第一圖像的第一線數(shù)據(jù)和來(lái)自由第二相機(jī)俘獲的第二圖像的第二線數(shù)據(jù)。所述圖像處理器經(jīng)配置以產(chǎn)生輸出幀，所述輸出幀具有對(duì)應(yīng)于所述第一圖像的線數(shù)據(jù)的第一區(qū)段且具有對(duì)應(yīng)于所述第二圖像的線數(shù)據(jù)的第二區(qū)段。所述第一區(qū)段和所述第二區(qū)段經(jīng)配置以用于產(chǎn)生三維(3D)圖像格式或3D視頻格式。
在一特定實(shí)施例中，揭示一種將來(lái)自多個(gè)傳感器的數(shù)據(jù)組合成一幀的方法。所述方法包括接收來(lái)自第一圖像傳感器的第一數(shù)據(jù)流，接收來(lái)自第二圖像傳感器的第二數(shù)據(jù)流，以及組合來(lái)自所述第一數(shù)據(jù)流的數(shù)據(jù)與來(lái)自所述第二數(shù)據(jù)流的數(shù)據(jù)以產(chǎn)生一幀。所述方法進(jìn)一步包括在圖像信號(hào)處理器處處理所述幀以產(chǎn)生經(jīng)處理幀并輸出所述經(jīng)處理幀以用于顯示。所述第一圖像傳感器和所述第二圖像傳感器中的每一者直接響應(yīng)于所述圖像信號(hào)處理器。 在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括第一圖像傳感器，所述第一圖像傳感器經(jīng)配置以產(chǎn)生第一數(shù)據(jù)流；第二圖像傳感器，所述第二圖像傳感器經(jīng)配置以產(chǎn)生第二數(shù)據(jù)流；以及組合器，所述組合器經(jīng)配置以組合來(lái)自所述第一數(shù)據(jù)流的第一數(shù)據(jù)與來(lái)自所述第二數(shù)據(jù)流的第二數(shù)據(jù)以產(chǎn)生一幀。所述設(shè)備進(jìn)一步包括圖像信號(hào)處理器，所述圖像信號(hào)處理器經(jīng)配置以處理所述幀且將經(jīng)處理幀輸出到顯示器。所述第一圖像傳感器和所述第二圖像傳感器中的每一者直接響應(yīng)于所述圖像信號(hào)處理器。在另一特定實(shí)施例中，揭示一種方法。所述方法包括接收來(lái)自第一圖像傳感器的圖像的第一圖像數(shù)據(jù)，接收來(lái)自第二圖像傳感器的圖像的第二圖像數(shù)據(jù)，以及同步在圖像數(shù)據(jù)采集期間所述第一圖像傳感器和所述第二圖像傳感器的逐線曝光。所述第一圖像傳感器與所述第二圖像傳感器彼此獨(dú)立。所述同步可為逐線的且可為逐幀的。在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括存儲(chǔ)器緩沖器。所述存儲(chǔ)器緩沖器包括用以經(jīng)由每一幀的串流傳輸以確定性次序?qū)?zhǔn)傳入串流的區(qū)段和在流之間的可編程間隙區(qū)段。在另一特定實(shí)施例中，揭示一種方法。所述方法包括在具有用于單一相機(jī)的輸入的圖像處理器處接收?qǐng)D像數(shù)據(jù)的多個(gè)行行。所述圖像數(shù)據(jù)的每一行包括來(lái)自由第一相機(jī)俘獲的第一圖像的一行的數(shù)據(jù)和來(lái)自由第二相機(jī)俘獲的第二圖像的一行的數(shù)據(jù)。所述方法還包括產(chǎn)生具有三維(3D)圖像格式或3D視頻格式的輸出。所述輸出對(duì)應(yīng)于所述第一圖像和所述第二圖像。在另一特定實(shí)施例中，揭示一種設(shè)備。所述設(shè)備包括圖像處理器，所述圖像處理器具有用于單一相機(jī)的輸入。所述設(shè)備還包括組合器，所述組合器經(jīng)配置以將圖像數(shù)據(jù)的多個(gè)行發(fā)送到所述圖像處理器。所述圖像數(shù)據(jù)的每一行包括來(lái)自由第一相機(jī)俘獲的第一圖像的一行的第一數(shù)據(jù)和來(lái)自由第二相機(jī)俘獲的第二圖像的一行的第二數(shù)據(jù)。所述圖像處理器經(jīng)配置以產(chǎn)生具有三維(3D)圖像格式或3D視頻格式的輸出。所述輸出對(duì)應(yīng)于所述第一圖像和所述第二圖像。通過(guò)所揭示實(shí)施例中的至少一者所提供的特定優(yōu)點(diǎn)在于，單一圖像信號(hào)處理器可用于同步且控制來(lái)自多個(gè)圖像傳感器的圖像數(shù)據(jù)。另一特定優(yōu)點(diǎn)在于，在流之間具有間隙提供了將圖像信號(hào)處理器中的經(jīng)組合流處理為單一幀的靈活性，且通過(guò)后續(xù)的基于塊的處理來(lái)避免對(duì)流的污染(即，如果間隙與基于最大塊的處理相等，則對(duì)流的污染得以避免)。本發(fā)明的其它方面、優(yōu)點(diǎn)和特征將在審閱包括以下章節(jié)的完整申請(qǐng)案之后變得顯而易見(jiàn)


具體實(shí)施方式
和權(quán)利要求書(shū)。

圖I為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例的方框圖；圖2為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的第二說(shuō)明性實(shí)施例的方框圖；圖3為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的第三說(shuō)明性實(shí)施例的方框圖；圖4為圖2的圖像處理系統(tǒng)的所選擇部分的特定說(shuō)明性實(shí)施例的方框圖，其中第一圖像傳感器和第二圖像傳感器接收共同控制數(shù)據(jù)；圖5為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的第四說(shuō)明性實(shí)施 例的方框圖；圖6為第一圖像傳感器的輸出處的第一數(shù)據(jù)流與第二圖像傳感器的輸出處的第二數(shù)據(jù)流經(jīng)組合以形成同步數(shù)據(jù)線的第一實(shí)施例的圖解表示；圖7為第一圖像傳感器的輸出處的第一數(shù)據(jù)流與第二圖像傳感器的輸出處的第二數(shù)據(jù)流經(jīng)組合以形成同步數(shù)據(jù)線的第二實(shí)施例的圖解表示；圖8為說(shuō)明來(lái)自第一傳感器的第一數(shù)據(jù)流與來(lái)自第二傳感器的第二數(shù)據(jù)流之間的二線相位差的相位圖的第一實(shí)施例的圖解表示；圖9為說(shuō)明來(lái)自第一傳感器的第一數(shù)據(jù)流與來(lái)自第二傳感器的第二數(shù)據(jù)流之間的一線相位差的相位圖的第二實(shí)施例的圖解表示；圖10為說(shuō)明多個(gè)傳感器中的每一者的像素?cái)?shù)據(jù)且說(shuō)明同步數(shù)據(jù)線的圖解表示；圖11為說(shuō)明用于多個(gè)傳感器的巾貞有效和線有效信號(hào)時(shí)序的時(shí)序圖；圖12為說(shuō)明來(lái)自第一傳感器的第一數(shù)據(jù)流與來(lái)自第二傳感器的第二數(shù)據(jù)流之間的三線相位差的相位圖的第三實(shí)施例的圖解表示；圖13為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)以產(chǎn)生三維圖像格式的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例的方框圖；圖14為說(shuō)明移動(dòng)裝置的各種實(shí)施例的圖解表示，所述移動(dòng)裝置具有用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)；圖15為說(shuō)明通過(guò)相機(jī)陣列俘獲的包括圖像之間的重疊的多個(gè)圖像的一實(shí)例的圖解表示；圖16為說(shuō)明通過(guò)相機(jī)陣列俘獲的包括圖像之間的重疊的多個(gè)圖像的一實(shí)例的圖解表示，其中每一圖像可具有其自己的移位分量和旋轉(zhuǎn)分量；圖17為說(shuō)明相機(jī)陣列和與所述相機(jī)陣列相關(guān)聯(lián)的電連接的特定實(shí)施例的方框圖；圖18為相機(jī)陣列處理系統(tǒng)的第一特定說(shuō)明性實(shí)施例的方框圖；圖19為相機(jī)陣列處理系統(tǒng)的第一特定說(shuō)明性實(shí)施例的方框圖；圖20為說(shuō)明包括主透鏡和布置在陣列中的多個(gè)相機(jī)的相機(jī)系統(tǒng)的圖解表示；圖21為說(shuō)明汽車(chē)中的多相機(jī)模塊的圖解表示；圖22為將來(lái)自多個(gè)傳感器的數(shù)據(jù)組合成同步數(shù)據(jù)線的方法的特定說(shuō)明性實(shí)施例的流程圖；圖23為將共同控制信號(hào)提供到多個(gè)圖像傳感器且經(jīng)由圖像處理器的單一相機(jī)輸入將同步數(shù)據(jù)線提供到圖像處理器的方法的特定說(shuō)明性實(shí)施例的流程圖24為將共同控制信號(hào)提供到多個(gè)圖像傳感器且接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出的方法的特定說(shuō)明性實(shí)施例的流程圖；圖25為在多個(gè)圖像傳感器處接收共同控制信號(hào)且產(chǎn)生來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出的方法的特定說(shuō)明性實(shí)施例的流程圖；圖26為在具有用于單一相機(jī)的輸入的圖像信號(hào)處理器處組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的方法的特定說(shuō)明性實(shí)施例的流程圖；圖27為將來(lái)自多個(gè)傳感器的數(shù)據(jù)組合成幀的方法的特定說(shuō)明性實(shí)施例的流程圖；圖28為同步第一圖像傳感器和第二圖像傳感器的逐線曝光的方法的特定說(shuō)明性實(shí)施例的流程圖；
圖29為組合來(lái)自多個(gè)傳感器的數(shù)據(jù)以產(chǎn)生三維圖像數(shù)據(jù)的方法的第一說(shuō)明性實(shí)施例的流程圖；圖30為組合來(lái)自多個(gè)傳感器的數(shù)據(jù)以產(chǎn)生三維圖像數(shù)據(jù)的方法的第二說(shuō)明性實(shí)施例的流程圖；圖31為同步第一圖像傳感器和第二圖像傳感器的逐線曝光的方法的特定說(shuō)明性實(shí)施例的流程圖；圖32為組合來(lái)自多個(gè)傳感器的數(shù)據(jù)以從同步數(shù)據(jù)線產(chǎn)生三維圖像數(shù)據(jù)的方法的特定說(shuō)明性實(shí)施例的流程圖；圖33為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例的方框圖；圖34為無(wú)線裝置的第一說(shuō)明性實(shí)施例的方框圖，所述無(wú)線裝置包括用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)；以及圖35為無(wú)線裝置的第二說(shuō)明性實(shí)施例的方框圖，所述無(wú)線裝置包括用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)。
具體實(shí)施例方式參看圖1，描繪用以組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例且將其大體上標(biāo)示為100。圖像處理系統(tǒng)100包括多相機(jī)模塊102、傳感器模塊104，和單相機(jī)芯片模塊106。在一特定實(shí)施例中，傳感器模塊104可包括多個(gè)傳感器，例如圖2和圖3的傳感器202和204，其中所述多個(gè)傳感器中的每一者經(jīng)配置以產(chǎn)生包括圖像的多個(gè)數(shù)據(jù)線的數(shù)據(jù)流。單相機(jī)模塊106可包括具有單一相機(jī)輸入的圖像處理器，例如圖2和圖3的圖像處理器208。將多個(gè)傳感器的圖像數(shù)據(jù)流的逐線圖像數(shù)據(jù)組合成同步數(shù)據(jù)線108使得圖像處理器能夠執(zhí)行用于多相機(jī)處理的格式化，即使所述圖像處理器具有單一相機(jī)輸入仍如此。結(jié)果，與使用單獨(dú)處理器用于每一相機(jī)或使用具有多個(gè)相機(jī)輸入的處理器的系統(tǒng)相比，系統(tǒng)100可以減小的成本來(lái)實(shí)施。參看圖2，描繪用以組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例且將其大體上標(biāo)示為200。圖像處理系統(tǒng)200包括第一傳感器202和第二傳感器204。圖像處理系統(tǒng)200進(jìn)一步包括組合器206、圖像信號(hào)處理器或視頻前端208，和傳感器同步器230。圖像信號(hào)處理器208可耦合到顯示裝置(未圖示)。組合器206包括一個(gè)或一個(gè)以上線緩沖器216。圖像處理系統(tǒng)200可集成于至少一個(gè)半導(dǎo)體裸片中。第一傳感器202經(jīng)配置以產(chǎn)生第一數(shù)據(jù)流，說(shuō)明為第一圖像數(shù)據(jù)流212。第一圖像數(shù)據(jù)流212包括第一數(shù)據(jù)線222。第二傳感器204經(jīng)配置以產(chǎn)生第二數(shù)據(jù)流，說(shuō)明為第二圖像數(shù)據(jù)流214。第二圖像數(shù)據(jù)流214包括第二數(shù)據(jù)線224。第一傳感器202和第二傳感器204可為實(shí)質(zhì)上類似的圖像傳感器，第一傳感器202與第二傳感器204彼此獨(dú)立且接收來(lái)自傳感器同步器230的共同控制信號(hào)234。傳感器同步器230經(jīng)配置以接收控制/數(shù)據(jù)信號(hào)232且將共同控制信號(hào)234輸出到第一傳感器202和第二傳感器204,從而使得第一傳感器202和第二傳感器204能夠產(chǎn)生緊密對(duì)準(zhǔn)的數(shù)據(jù)流212、214。舉例來(lái)說(shuō)，數(shù)據(jù)流212、214可具有實(shí)質(zhì)上相同的時(shí)序特性，例如頻率和相位。在一特定實(shí)施例中,可從圖像信號(hào)處理器208接收控制/數(shù)據(jù)信號(hào)232。組合器206響應(yīng)于第一圖像數(shù)據(jù)流212和第二圖像數(shù)據(jù)流214。組合器206經(jīng)配置以在線緩沖器216內(nèi)組合來(lái)自第一圖像數(shù)據(jù)流212的數(shù)據(jù)與來(lái)自第二圖像數(shù)據(jù)流214的數(shù)據(jù)。在一特定實(shí)施例中，線緩沖器216經(jīng)配置以對(duì)準(zhǔn)第一數(shù)據(jù)(例如，來(lái)自第一傳感器 202的第一數(shù)據(jù)線222)與第二數(shù)據(jù)(例如，來(lái)自第二傳感器204的第二數(shù)據(jù)線224)。在一特定實(shí)施例中，組合器206響應(yīng)于存儲(chǔ)于線緩沖器216內(nèi)的數(shù)據(jù)且將線數(shù)據(jù)218提供到圖像信號(hào)處理器208。在一特定實(shí)施例中，線數(shù)據(jù)218可包括多個(gè)行，其中每一行為來(lái)自每一傳感器202、204的對(duì)應(yīng)行的組合,例如關(guān)于圖6所描述。圖像信號(hào)處理器208經(jīng)配置以處理線數(shù)據(jù)218且產(chǎn)生經(jīng)處理線數(shù)據(jù)240。在一特定實(shí)施例中，經(jīng)處理線數(shù)據(jù)240可作為經(jīng)處理幀數(shù)據(jù)而提供。盡管已展示兩個(gè)傳感器，但應(yīng)理解，其它實(shí)施例可包括兩個(gè)以上傳感器。舉例來(lái)說(shuō)，圖3描繪包括兩個(gè)以上傳感器的實(shí)施例300。第N傳感器305經(jīng)配置以產(chǎn)生第N數(shù)據(jù)流，說(shuō)明為第N圖像數(shù)據(jù)流315。第N圖像數(shù)據(jù)流315包括第N數(shù)據(jù)線325。第N傳感器305可實(shí)質(zhì)上類似于第一圖像傳感器202和第二圖像傳感器204，且可接收來(lái)自傳感器同步器230的共同控制信號(hào)234，從而使得第一傳感器202、第二傳感器204和第N傳感器305能夠產(chǎn)生緊密對(duì)準(zhǔn)的數(shù)據(jù)流212、214、315。舉例來(lái)說(shuō),數(shù)據(jù)流212、214、315可具有實(shí)質(zhì)上相同的時(shí)序特性，例如頻率和相位。組合器206響應(yīng)于第一圖像數(shù)據(jù)流212、第二圖像數(shù)據(jù)流214和第N圖像數(shù)據(jù)流315。組合器206經(jīng)配置以在線緩沖器216內(nèi)組合來(lái)自第一圖像數(shù)據(jù)流212、第二圖像數(shù)據(jù)流214與第N圖像數(shù)據(jù)流315的數(shù)據(jù)。因?yàn)閺谋还餐刂频念愃苽鞲衅?例如，圖2的202、204，或圖3的202、204、305)接收的數(shù)據(jù)具有實(shí)質(zhì)上相同的頻率和相位，所以在圖像數(shù)據(jù)的單一圖像線內(nèi)可發(fā)生在組合器206處所接收的數(shù)據(jù)流之間的同步。在一特定實(shí)施例中，線緩沖器216可針對(duì)未對(duì)準(zhǔn)的最差狀況設(shè)定尺寸(即，如果同步未對(duì)準(zhǔn)為三條線，則線緩沖器212應(yīng)被設(shè)定大小以緩沖至少六條線)。結(jié)果，可使用單一圖像信號(hào)處理器有效地處理經(jīng)組合數(shù)據(jù)。因此，與多處理器系統(tǒng)相比(例如，向每一傳感器指派一處理器)，總的圖像系統(tǒng)成本和復(fù)雜性可減小。參看圖4，描繪圖2的圖像處理系統(tǒng)200的所選擇部分400的特定說(shuō)明性實(shí)施例。圖像處理系統(tǒng)的部分400包括第一傳感器202、第二傳感器204和傳感器同步器230。在一特定實(shí)施例中，第一傳感器202和第二傳感器204為接收來(lái)自傳感器同步器230的相同起動(dòng)或復(fù)位信號(hào)和相同時(shí)鐘輸入的相同傳感器或幾乎相同傳感器。舉例來(lái)說(shuō)，第一傳感器202和第二傳感器204可各自接收來(lái)自傳感器同步器230的共同控制數(shù)據(jù)/信號(hào)。在一特定實(shí)施例中，控制數(shù)據(jù)/信號(hào)可包括控制時(shí)鐘信號(hào)404、控制數(shù)據(jù)信號(hào)406、相機(jī)時(shí)鐘信號(hào)408和相機(jī)復(fù)位信號(hào)410?？刂茢?shù)據(jù)/信號(hào)404到410可經(jīng)由順應(yīng)二導(dǎo)線芯片間通信協(xié)議(twowire inter-chip communication protocol)的接口而形成和傳輸，例如集成電路間(I2C)多主控串行計(jì)算機(jī)總線?；蛘撸刂茢?shù)據(jù)/信號(hào)404到410可根據(jù)順應(yīng)以下各者的規(guī)范的接口而形成和傳輸數(shù)字相機(jī)模塊與移動(dòng)電話引擎之間的串行接口(例如，相機(jī)串行接口(CSI))、外圍裝置(相機(jī))與主機(jī)處理器(基帶、應(yīng)用程序引擎)之間的接口(例如，相機(jī)串行接口 2(CSI-2))、數(shù)字相機(jī)模塊與移動(dòng)電話引擎之間的并行接口(例如，相機(jī)并行接口(CPI))，或其它控制接口。第 一傳感器202可經(jīng)配置以將第一時(shí)序數(shù)據(jù)420和第一傳感器圖像數(shù)據(jù)422發(fā)送到如圖2或圖5中的系統(tǒng)中所說(shuō)明的組合器206。類似地，第二傳感器204可經(jīng)配置以將第二時(shí)序數(shù)據(jù)430和第二傳感器圖像數(shù)據(jù)432發(fā)送到圖2或圖5的組合器206。在操作期間，從時(shí)序觀點(diǎn)，第一傳感器202和第二傳感器204各自在相同或幾乎相同的條件中操作。舉例來(lái)說(shuō)，第一傳感器202和第二傳感器204各自接收相同控制時(shí)鐘信號(hào)404、相同控制數(shù)據(jù)信號(hào)406、相同相機(jī)時(shí)鐘信號(hào)408和相同相機(jī)復(fù)位信號(hào)410。因?yàn)榈谝粋鞲衅?02和第二傳感器204為相同的或幾乎相同的，所以第一傳感器202和第二傳感器204在相同時(shí)序條件下實(shí)質(zhì)上類似地操作。舉例來(lái)說(shuō)，來(lái)自第一傳感器202的數(shù)據(jù)輸出與來(lái)自第二傳感器204的數(shù)據(jù)輸出具有實(shí)質(zhì)上相同的頻率和相位。為了說(shuō)明，來(lái)自第一傳感器202和第二傳感器204的數(shù)據(jù)輸出之間的相位差可小于相位差的單一水平線，從而使得單一圖像信號(hào)處理器能夠用于同步且控制來(lái)自兩個(gè)圖像傳感器202、204的圖像數(shù)據(jù)。參看圖5，描繪用以組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例的方框圖且將其大體上標(biāo)示為500。系統(tǒng)500包括第一圖像傳感器202、第二圖像傳感器204、組合器206、傳感器同步器230和圖像信號(hào)處理器208。系統(tǒng)500進(jìn)一步包括寄存器接口 510和時(shí)鐘管理裝置512。在一特定實(shí)施例中，寄存器接口 510可在傳感器同步器230內(nèi)?；蛘撸拇嫫鹘涌?510可為獨(dú)立模塊。在一特定實(shí)施例中，系統(tǒng)500可進(jìn)一步包括精簡(jiǎn)型輸出格式化器506 (以陰影展示)以及輸送包化器和格式化器(transportpacker andformatter) 508 (以陰影展示)。在一特定實(shí)施例中，組合器206經(jīng)配置以接收來(lái)自第一傳感器202的第一時(shí)序數(shù)據(jù)420和第一傳感器圖像數(shù)據(jù)422。組合器206還經(jīng)配置以接收來(lái)自第二傳感器204的第二時(shí)序數(shù)據(jù)430和第二傳感器圖像數(shù)據(jù)432。組合器206進(jìn)一步經(jīng)配置以接收來(lái)自時(shí)鐘管理裝置512的時(shí)鐘信號(hào)526。組合器206使用第一時(shí)序數(shù)據(jù)420、第一傳感器圖像數(shù)據(jù)422、第二時(shí)序數(shù)據(jù)430和第二傳感器圖像數(shù)據(jù)432來(lái)產(chǎn)生提供到圖像信號(hào)處理器208的同步數(shù)據(jù)線。圖像信號(hào)處理器208處理所述同步數(shù)據(jù)線以產(chǎn)生經(jīng)處理的數(shù)據(jù)線數(shù)據(jù)。可將所述經(jīng)處理的數(shù)據(jù)線數(shù)據(jù)提供到另一組件，例如提供到顯示裝置。因此，來(lái)自多個(gè)傳感器的圖像數(shù)據(jù)可經(jīng)組合、處理且再現(xiàn)以用于在顯示裝置處顯示。在一特定實(shí)施例中，第一時(shí)序數(shù)據(jù)420可與第一像素時(shí)鐘相關(guān)聯(lián),第一傳感器圖像數(shù)據(jù)422可與第一像素大小相關(guān)聯(lián)，第二時(shí)序數(shù)據(jù)430可與第二像素時(shí)鐘相關(guān)聯(lián)，且第二傳感器圖像數(shù)據(jù)432可與第二像素大小相關(guān)聯(lián)。當(dāng)組合器406組合第一時(shí)序數(shù)據(jù)420、第一傳感器圖像數(shù)據(jù)422、第二時(shí)序數(shù)據(jù)430和第二傳感器圖像數(shù)據(jù)432以產(chǎn)生同步數(shù)據(jù)線時(shí)，第一圖像數(shù)據(jù)的第一線和第二圖像數(shù)據(jù)的對(duì)應(yīng)線組合成單一圖像線。在一特定實(shí)施例中，所述單一圖像線的大小可為第一圖像數(shù)據(jù)的第一線或第二圖像數(shù)據(jù)的對(duì)應(yīng)線的大小的實(shí)質(zhì)上兩倍(例如，第一像素大小或第二像素大小的兩倍)，且經(jīng)組合的單一圖像線的像素時(shí)鐘的速率可為第一像素時(shí)鐘或第二像素時(shí)鐘的速率的實(shí)質(zhì)上兩倍(例如，可具有為第一像素時(shí)鐘頻率或第二像素時(shí)鐘頻率的兩倍的時(shí)鐘頻率)。所產(chǎn)生的同步數(shù)據(jù)線經(jīng)由組合器時(shí)序數(shù)據(jù)信號(hào)528和組合器圖像數(shù)據(jù)信號(hào)530發(fā)送到圖像信號(hào)處理器208。在一特定實(shí)施例中，由組合器206產(chǎn)生的同步數(shù)據(jù)線可提供到精簡(jiǎn)型輸出格式化器506以產(chǎn)生經(jīng)格式化數(shù)據(jù)，所述經(jīng)格式化數(shù)據(jù)在提供到圖像信號(hào)處理器208之前提供到輸送包化器和格式化器508。 在一特定實(shí)施例中，精簡(jiǎn)型輸出格式化器506接收組合器時(shí)序數(shù)據(jù)信號(hào)528和組合器圖像數(shù)據(jù)信號(hào)530以產(chǎn)生經(jīng)格式化數(shù)據(jù)。經(jīng)格式化數(shù)據(jù)可包括輸出格式化器時(shí)序數(shù)據(jù)信號(hào)536、輸出格式化器圖像數(shù)據(jù)信號(hào)538、輸出格式化器統(tǒng)計(jì)數(shù)據(jù)信號(hào)(outputformatterstats data signal) 540、輸出格式化器開(kāi)始數(shù)據(jù)信號(hào)542,和輸出格式化器有效數(shù)據(jù)信號(hào)544。在一特定實(shí)施例中，輸送包化器和格式化器508接收來(lái)自精簡(jiǎn)型輸出格式化器506的經(jīng)格式化數(shù)據(jù)536到544，且產(chǎn)生包括輸送時(shí)序數(shù)據(jù)信號(hào)546和輸送圖像數(shù)據(jù)信號(hào)548的輸送數(shù)據(jù)流。在一特定實(shí)施例中，寄存器接口 510可耦合到圖像信號(hào)處理器208且耦合到時(shí)鐘管理裝置512。在一特定實(shí)施例中，寄存器接口 510可接收來(lái)自時(shí)鐘管理裝置512的時(shí)鐘信號(hào)527且可耦合到寄存器總線572。時(shí)鐘管理裝置512經(jīng)配置以接收第二時(shí)序數(shù)據(jù)信號(hào)430且輸出時(shí)鐘信號(hào)526。在一特定實(shí)施例中，時(shí)鐘信號(hào)526為第二時(shí)序數(shù)據(jù)信號(hào)430的頻率的實(shí)質(zhì)上兩倍，以使得組合器206能夠在組合來(lái)自多個(gè)傳感器的并發(fā)數(shù)據(jù)的同時(shí)維持幀處理速率。因?yàn)閬?lái)自被共同控制的類似傳感器的數(shù)據(jù)輸出具有實(shí)質(zhì)上相同的頻率和相位，所以可在圖像數(shù)據(jù)的單一圖像線內(nèi)發(fā)生數(shù)據(jù)流之間的同步。因此，可使用具有對(duì)圖像數(shù)據(jù)的單一線的存取權(quán)的單一圖像信號(hào)處理器有效地處理經(jīng)組合數(shù)據(jù)。參看圖6，描繪第一圖像傳感器的輸出處的第一數(shù)據(jù)流與第二圖像傳感器的輸出處的第二數(shù)據(jù)流經(jīng)組合以形成同步數(shù)據(jù)線的特定實(shí)施例的圖解表示且將其大體上標(biāo)示為600。第一傳感器(例如，圖2的第一傳感器202)產(chǎn)生對(duì)應(yīng)于圖像的第一圖像數(shù)據(jù)的第一數(shù)據(jù)流602。第二傳感器(例如，圖2的第二傳感器204)產(chǎn)生對(duì)應(yīng)于圖像的第二圖像數(shù)據(jù)的第二數(shù)據(jù)流604。來(lái)自第一數(shù)據(jù)流602的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流604的數(shù)據(jù)經(jīng)組合以形成數(shù)據(jù)輸出數(shù)據(jù)流606。在一特定實(shí)施例中，第一數(shù)據(jù)流602包括與圖像的第一圖像數(shù)據(jù)的第一線相關(guān)聯(lián)的數(shù)據(jù)，且第二數(shù)據(jù)流604包括與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線相關(guān)聯(lián)的數(shù)據(jù)。第一數(shù)據(jù)流602包括具有第一線索引值的線數(shù)據(jù)610、具有第二線索引值的線數(shù)據(jù)612、具有第三線索引值的線數(shù)據(jù)614，和具有第四線索引值的線數(shù)據(jù)616。第二數(shù)據(jù)流604包括第一數(shù)據(jù)流的線數(shù)據(jù)的對(duì)應(yīng)線數(shù)據(jù)，包括具有第一線索引值的對(duì)應(yīng)線數(shù)據(jù)620、具有第二線索引值的對(duì)應(yīng)線數(shù)據(jù)622、具有第三線索引值的對(duì)應(yīng)線數(shù)據(jù)624，和具有第四線索引值的對(duì)應(yīng)線數(shù)據(jù)626。數(shù)據(jù)輸出數(shù)據(jù)流606包括圖像的第一圖像數(shù)據(jù)的第一線與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線的組合。如所說(shuō)明，第一數(shù)據(jù)流602與第二數(shù)據(jù)流604經(jīng)交錯(cuò)以形成數(shù)據(jù)輸出數(shù)據(jù)流606。舉例來(lái)說(shuō)，數(shù)據(jù)輸出數(shù)據(jù)流606包括具有第一線索引值的經(jīng)組合線數(shù)據(jù)630、具有第二線索引值的經(jīng)組合線數(shù)據(jù)632，和具有第三線索引值的經(jīng)組合線數(shù)據(jù)634。經(jīng)組合線數(shù)據(jù)630包括線數(shù)據(jù)610和對(duì)應(yīng)線數(shù)據(jù)620。經(jīng)組合線數(shù)據(jù)632包括線數(shù)據(jù)612和對(duì)應(yīng)線數(shù)據(jù)622。經(jīng)組合線數(shù)據(jù)634包括線數(shù)據(jù)614和對(duì)應(yīng)線數(shù)據(jù)624?？赏ㄟ^(guò)在線緩沖器(例如，圖2的線緩沖器216)內(nèi)組合對(duì)應(yīng)線而產(chǎn)生每一經(jīng)組合線630到634。在一特定實(shí)施例中，來(lái)自第一數(shù)據(jù)流602的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流604的數(shù)據(jù)經(jīng)組合以產(chǎn)生形成幀660的多個(gè)同步數(shù)據(jù)線。幀660可包括多個(gè)行642，其中每一行對(duì)應(yīng)于一線索引值且存儲(chǔ)包括第一圖像數(shù)據(jù)的具有所述線索引值的一線和第二圖像數(shù)據(jù)的具有所述線索引值的對(duì)應(yīng)線的同步數(shù)據(jù)線。舉例來(lái)說(shuō)，幀660的第一行可包括經(jīng)組合線數(shù)據(jù)630，幀660的第二行可包括經(jīng)組合線數(shù)據(jù)632，幀660的第三行可包括經(jīng)組合線數(shù)據(jù)634，等等。每一同步圖像數(shù)據(jù)線形成幀660的部分，使得幀660中的數(shù)據(jù)對(duì)準(zhǔn)。以匹配對(duì)來(lái)自所述圖像傳感器的圖像數(shù)據(jù)的讀取次序的行642的次序來(lái)描繪幀660 (即，來(lái)自圖像傳感器的頂部線(線索引I)的經(jīng)組合數(shù)據(jù)在幀660的頂部線中，且來(lái)自圖像傳感器的下一條線(線索引2)的經(jīng)組合數(shù)據(jù)在幀660的下一條線中)?；蛘?，在其它 實(shí)施例中，幀660的行可能不匹配對(duì)圖像數(shù)據(jù)的讀取次序，且可替代地對(duì)應(yīng)于圖像數(shù)據(jù)的任何其它次序。舉例來(lái)說(shuō)，幀660的頂部行可對(duì)應(yīng)于線索引2，而幀660的下一行可對(duì)應(yīng)于線索引I。幀660可為可編程的，使得行642中的每一者可經(jīng)編程以對(duì)應(yīng)于圖像數(shù)據(jù)的線索引值中的任一者。在一特定實(shí)施例中，第一圖像數(shù)據(jù)的第一線610與第一像素大小(例如，每條線的像素的數(shù)目)和第一像素時(shí)鐘相關(guān)聯(lián)，且第二圖像數(shù)據(jù)的對(duì)應(yīng)線620與第二像素大小和第二像素時(shí)鐘相關(guān)聯(lián)。產(chǎn)生數(shù)據(jù)流602、604的第一傳感器和第二傳感器經(jīng)配置以接收共同時(shí)鐘信號(hào)和共同復(fù)位信號(hào)。當(dāng)?shù)谝粓D像數(shù)據(jù)的第一線610與第二圖像數(shù)據(jù)的對(duì)應(yīng)線620組合成單一圖像線時(shí)，所述單一圖像線的大小為第一圖像數(shù)據(jù)的第一線610或第二圖像數(shù)據(jù)的對(duì)應(yīng)線620的大小的實(shí)質(zhì)上兩倍，且經(jīng)組合的單一圖像線的像素時(shí)鐘信號(hào)(例如，第三像素時(shí)鐘信號(hào))具有為第一像素時(shí)鐘信號(hào)或第二像素時(shí)鐘信號(hào)的時(shí)鐘速率的實(shí)質(zhì)上兩倍的時(shí)鐘速率。舉例來(lái)說(shuō)，經(jīng)組合線數(shù)據(jù)630可具有為線數(shù)據(jù)610的圖像大小的實(shí)質(zhì)上兩倍或?qū)?yīng)線數(shù)據(jù)620的圖像大小的實(shí)質(zhì)上兩倍的圖像大小。類似地，經(jīng)組合線數(shù)據(jù)630的像素時(shí)鐘頻率可具有為與線數(shù)據(jù)610相關(guān)聯(lián)的第一像素時(shí)鐘信號(hào)的頻率的實(shí)質(zhì)上兩倍或與對(duì)應(yīng)線數(shù)據(jù)620相關(guān)聯(lián)的第二像素時(shí)鐘信號(hào)的頻率的實(shí)質(zhì)上兩倍的頻率，使得經(jīng)組合線數(shù)據(jù)630的像素時(shí)鐘頻率可與第三像素時(shí)鐘信號(hào)相關(guān)聯(lián)，第三像素時(shí)鐘信號(hào)具有為第一像素時(shí)鐘或第二像素時(shí)鐘的頻率的實(shí)質(zhì)上兩倍的頻率?；蛘?，在具有相等線大小的三個(gè)圖像傳感器的線數(shù)據(jù)經(jīng)組合的實(shí)施方案中，同步線大小可為傳感器線大小的實(shí)質(zhì)上三倍，且像素時(shí)鐘速率可為個(gè)別傳感器的像素時(shí)鐘速率的實(shí)質(zhì)上三倍。在可具有不相等大小的任意數(shù)目個(gè)傳感器的一般狀況下，可將同步線大小設(shè)定為大于或等于經(jīng)組合的線大小的總和，且像素時(shí)鐘速率可經(jīng)設(shè)定以使得輸出線帶寬等于或大于輸入帶寬的總和。可在圖像信號(hào)處理器(例如，圖2的圖像信號(hào)處理器208)處處理幀660，以產(chǎn)生經(jīng)處理幀650。經(jīng)處理幀650包括包括來(lái)自第一圖像傳感器(例如，圖2的傳感器202)的第一圖像數(shù)據(jù)的第一區(qū)段652、包括來(lái)自第二圖像傳感器(例如，圖2的傳感器204)的第二圖像數(shù)據(jù)的第二區(qū)段654，和間隙區(qū)段656。間隙區(qū)段656可包括安置于第一區(qū)段652與第二區(qū)段654之間的非圖像數(shù)據(jù)。在一特定實(shí)施例中，第一區(qū)段652包括第一圖像數(shù)據(jù)的一線，且第二區(qū)段654包括第二圖像數(shù)據(jù)的對(duì)應(yīng)線。在一特定實(shí)施例中，間隙區(qū)段656可用于邊緣濾波，且可包括寬度為大致五個(gè)像素的黑色間隙。作為另一實(shí)例，可將間隙區(qū)段656添加在多個(gè)線之間，且具有等于內(nèi)插核心(interpolation kernel)的大小或通過(guò)圖像信號(hào)處理器應(yīng)用于巾貞650的最大二維濾波器的大小的大小。在一特定說(shuō)明性實(shí)施例中，可從第一區(qū)段652或第二區(qū)段654收集用于自動(dòng)曝光、自動(dòng)聚焦和自動(dòng)白平衡的統(tǒng)計(jì)，第一區(qū)段652或第二區(qū)段654中的任一者可為來(lái)自相應(yīng)傳感器中的一者的完整圖像。因此，用于自動(dòng)曝光、自動(dòng)聚焦和自動(dòng)白平衡的統(tǒng)計(jì)可從最終圖像的一半(例如，第一區(qū)段652)收集且可應(yīng)用于兩個(gè)傳感器，這是由于兩個(gè)傳感器正接收實(shí)質(zhì)上相同的時(shí)序信息。因而，來(lái)自多個(gè)傳感器的數(shù)據(jù)輸出具有實(shí)質(zhì)上相同的頻率和相位，使得可在圖像的圖像數(shù)據(jù)的一條圖像線內(nèi)發(fā)生同步。 幀650可存儲(chǔ)于存儲(chǔ)器中，所述存儲(chǔ)器集成于至少一個(gè)半導(dǎo)體裸片中。幀650可存儲(chǔ)于存儲(chǔ)器中，所述存儲(chǔ)器并入到例如以下各者的消費(fèi)型電子裝置中機(jī)頂盒、音樂(lè)播放器、視頻播放器、娛樂(lè)單元、導(dǎo)航裝置、通信裝置、個(gè)人數(shù)字助理(PDA)、固定位置數(shù)據(jù)單元和計(jì)算機(jī)。所述電子裝置可利用圖像處理方法，包括處理來(lái)自多個(gè)傳感器的圖像數(shù)據(jù)的3D應(yīng)用程序。參看圖7，描繪第一圖像傳感器的輸出處的第一數(shù)據(jù)流與第二圖像傳感器的輸出處的第二數(shù)據(jù)流經(jīng)組合以形成同步數(shù)據(jù)線的第二實(shí)施例的圖解表示且將其大體上標(biāo)示為700。第一傳感器(例如，圖2的第一圖像傳感器202)產(chǎn)生對(duì)應(yīng)于圖像的第一圖像數(shù)據(jù)的第一數(shù)據(jù)流702。第二傳感器(例如，圖2的第二圖像傳感器204)產(chǎn)生對(duì)應(yīng)于圖像的第二圖像數(shù)據(jù)的第二數(shù)據(jù)流704。來(lái)自第一數(shù)據(jù)流702的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流704的數(shù)據(jù)經(jīng)組合以形成數(shù)據(jù)輸出數(shù)據(jù)流706。在一特定實(shí)施例中，第一數(shù)據(jù)流702包括與圖像的第一圖像數(shù)據(jù)的第一線相關(guān)聯(lián)的數(shù)據(jù)，且第二數(shù)據(jù)流704包括與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線相關(guān)聯(lián)的數(shù)據(jù)。第一數(shù)據(jù)流702包括具有第一線索引值的線數(shù)據(jù)710、具有第二線索引值的線數(shù)據(jù)712、具有第三線索引值的線數(shù)據(jù)714，和具有第四線索引值的線數(shù)據(jù)716。第二數(shù)據(jù)流704包括第一數(shù)據(jù)流的線數(shù)據(jù)的對(duì)應(yīng)線數(shù)據(jù)，包括具有第一線索引值的對(duì)應(yīng)線數(shù)據(jù)720、具有第二線索引值的對(duì)應(yīng)線數(shù)據(jù)722、具有第三線索引值的對(duì)應(yīng)線數(shù)據(jù)724，和具有第四線索引值的對(duì)應(yīng)線數(shù)據(jù)726。數(shù)據(jù)輸出數(shù)據(jù)流706包括圖像的第一圖像數(shù)據(jù)的第一線與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線的組合。如所說(shuō)明，第一數(shù)據(jù)流702和第二數(shù)據(jù)流704與間隙區(qū)段708交錯(cuò)以形成數(shù)據(jù)輸出數(shù)據(jù)流706。舉例來(lái)說(shuō)，數(shù)據(jù)輸出數(shù)據(jù)流706的所說(shuō)明部分包括具有第一線索引值的經(jīng)組合線數(shù)據(jù)730、具有第二線索引值的經(jīng)組合線數(shù)據(jù)732，和具有第三線索引值的經(jīng)組合線數(shù)據(jù)734。經(jīng)組合線數(shù)據(jù)730包括通過(guò)間隙區(qū)段708與對(duì)應(yīng)線數(shù)據(jù)720分離的線數(shù)據(jù)710。經(jīng)組合線數(shù)據(jù)732包括通過(guò)間隙區(qū)段708與對(duì)應(yīng)線數(shù)據(jù)722分離的線數(shù)據(jù)712。經(jīng)組合線數(shù)據(jù)734包括通過(guò)間隙區(qū)段708與對(duì)應(yīng)線數(shù)據(jù)724分離的線數(shù)據(jù)714?？赏ㄟ^(guò)在線緩沖器(例如，圖2的線緩沖器216)內(nèi)組合對(duì)應(yīng)線與對(duì)應(yīng)線之間的間隙區(qū)段708而產(chǎn)生每一經(jīng)組合線730到734。在一特定實(shí)施例中，來(lái)自第一數(shù)據(jù)流702的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流704的數(shù)據(jù)組合以產(chǎn)生形成幀740的多個(gè)同步數(shù)據(jù)線。幀740可包括多個(gè)行742，其中每一行對(duì)應(yīng)于一線索引值，且存儲(chǔ)第一圖像數(shù)據(jù)的具有所述線索引值的一線，且存儲(chǔ)第二圖像數(shù)據(jù)的具有所述線索引值的對(duì)應(yīng)線。舉例來(lái)說(shuō)，幀740的第一行可包括經(jīng)組合線數(shù)據(jù)730，幀740的第二行可包括經(jīng)組合線數(shù)據(jù)732，幀740的第三行可包括經(jīng)組合線數(shù)據(jù)734，等等，使得幀740中的數(shù)據(jù)對(duì)準(zhǔn)。在一特定實(shí)施例中，第一圖像數(shù)據(jù)的第一線710與第一像素大小(例如，每一線的像素的數(shù)目)和第一像素時(shí)鐘相關(guān)聯(lián)，且第二圖像數(shù)據(jù)的對(duì)應(yīng)線720與第二像素大小和第二像素時(shí)鐘相關(guān)聯(lián)。產(chǎn)生數(shù)據(jù)流702、704的第一傳感器和第二傳感器經(jīng)配置以接收共同時(shí)鐘信號(hào)和共同復(fù)位信號(hào)。當(dāng)?shù)谝粓D像數(shù)據(jù)的第一線710與第二圖像數(shù)據(jù)的對(duì)應(yīng)線720組合成單一圖像線時(shí)，所述單一圖像線的大小為第一圖像數(shù)據(jù)的第一線710或第二圖像數(shù)據(jù)的 對(duì)應(yīng)線720的大小的大致兩倍。此外，經(jīng)組合的單一圖像線的像素時(shí)鐘信號(hào)(例如，第三像素時(shí)鐘信號(hào))具有為第一像素時(shí)鐘信號(hào)或第二像素時(shí)鐘信號(hào)的時(shí)鐘速率的大致兩倍的時(shí)鐘速率。舉例來(lái)說(shuō)，經(jīng)組合線數(shù)據(jù)730可具有為線數(shù)據(jù)710的圖像大小的大致兩倍或?qū)?yīng)線數(shù)據(jù)720的圖像大小的大致兩倍的圖像大小。類似地，經(jīng)組合線數(shù)據(jù)730的像素時(shí)鐘頻率可具有為與線數(shù)據(jù)710相關(guān)聯(lián)的第一像素時(shí)鐘信號(hào)的頻率的大致兩倍或與對(duì)應(yīng)線數(shù)據(jù)720相關(guān)聯(lián)的第二像素時(shí)鐘信號(hào)的頻率的大致兩倍的頻率，使得經(jīng)組合線數(shù)據(jù)730的像素時(shí)鐘頻率可與第三像素時(shí)鐘信號(hào)相關(guān)聯(lián)，第三像素時(shí)鐘信號(hào)具有為第一像素時(shí)鐘或第二像素時(shí)鐘的頻率的大致兩倍的頻率。每一間隙區(qū)段708可包括非圖像數(shù)據(jù)。在一特定實(shí)施例中，通過(guò)間隙區(qū)段708所形成的在幀740中的非圖像數(shù)據(jù)區(qū)域可用于邊緣濾波。間隙區(qū)段708可包括寬度為大約五個(gè)像素的黑色間隙。在其它實(shí)施例中，每一間隙區(qū)段708具有等于內(nèi)插核心的大小或由圖像處理器(例如，圖2的圖像處理器208)應(yīng)用于幀740的最大二維濾波器的大小的大小。可由所述圖像處理器處理幀740以產(chǎn)生3D圖像。參看圖8，描繪說(shuō)明來(lái)自第一傳感器的第一數(shù)據(jù)流與來(lái)自第二傳感器的第二數(shù)據(jù)流之間的二線相位差的相位圖的第一實(shí)施例的圖解表示且將其大體上標(biāo)示為800。第一傳感器(例如，圖2的第一傳感器202)產(chǎn)生第一數(shù)據(jù)流，第一數(shù)據(jù)流包括第一傳感器第一線數(shù)據(jù)802、第一傳感器第二線數(shù)據(jù)804，和第一傳感器第三線數(shù)據(jù)806。第二傳感器(例如，圖2的第二傳感器204)產(chǎn)生第二數(shù)據(jù)流，第二數(shù)據(jù)流包括第二傳感器第一線數(shù)據(jù)812、第二傳感器第二線數(shù)據(jù)814，和第二傳感器第三線數(shù)據(jù)816。來(lái)自第一數(shù)據(jù)流的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)經(jīng)組合以形成經(jīng)組合線820。在圖8中所說(shuō)明的特定實(shí)施例中，說(shuō)明第一線數(shù)據(jù)、第二線數(shù)據(jù)和第三線數(shù)據(jù)?；蛘撸僧a(chǎn)生任何數(shù)目個(gè)線數(shù)據(jù)(例如，如圖6和7中所說(shuō)明的720條線)。在圖8的特定實(shí)施例中，在第一數(shù)據(jù)流的數(shù)據(jù)與第二數(shù)據(jù)流的數(shù)據(jù)之間存在二線相位差。舉例來(lái)說(shuō)，通過(guò)組合器(例如，圖2的組合器216)可在第一線相位期間接收第一傳感器第一線數(shù)據(jù)802，可在第二線相位期間接收第一傳感器第二線數(shù)據(jù)804，且可在第三線相位期間接收第一傳感器第三線數(shù)據(jù)806和第二傳感器第一線數(shù)據(jù)812。因而，在第一傳感器第一線數(shù)據(jù)802與第二傳感器第一線數(shù)據(jù)812之間存在二線相位差。
經(jīng)組合線820包括圖像的第一圖像數(shù)據(jù)的第一線與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線的組合。如所說(shuō)明，第一數(shù)據(jù)流與第二數(shù)據(jù)流經(jīng)交錯(cuò)以形成經(jīng)組合線820。舉例來(lái)說(shuō)，經(jīng)組合線820包括具有第一傳感器第一線數(shù)據(jù)802和第二傳感器第一線數(shù)據(jù)812的經(jīng)組合線數(shù)據(jù)822，具有第一傳感器第二線數(shù)據(jù)804和第二傳感器第二線數(shù)據(jù)814的經(jīng)組合線數(shù)據(jù)824，和具有第一傳感器第三線數(shù)據(jù)806和第二傳感器第三線數(shù)據(jù)816的經(jīng)組合線數(shù)據(jù)826?？赏ㄟ^(guò)在線緩沖器(例如，圖2的線緩沖器216)內(nèi)組合對(duì)應(yīng)線而產(chǎn)生每一經(jīng)組合線822到826。線緩沖器可經(jīng)配置以在產(chǎn)生同步數(shù)據(jù)線(例如，經(jīng)組合線數(shù)據(jù)822)之前緩沖從第一圖像傳感器接收的下一數(shù)據(jù)線(例如，第一傳感器第二線數(shù)據(jù)804)的至少一部分。因而，來(lái)自多個(gè)傳感器的具有二線相位差的數(shù)據(jù)輸出可經(jīng)組合，使得可在圖像的圖像數(shù)據(jù)的一條圖像線內(nèi)發(fā)生同步。參看圖9，描繪說(shuō)明來(lái)自第一傳感器的第一數(shù)據(jù)流與來(lái)自第二傳感器的第二數(shù)據(jù)流之間的一線相位差的相位圖的第一實(shí)施例的圖解表不且將其大體上標(biāo)不為900。第一傳感器(例如，圖2的第一傳感器202)產(chǎn)生第一數(shù)據(jù)流，第一數(shù)據(jù)流包括第一傳感器第一線數(shù)據(jù)902、第一傳感器第二線數(shù)據(jù)904、第一傳感器第三線數(shù)據(jù)906，和第一傳感器第四線數(shù)據(jù)908。第二傳感器(例如，圖2的第二傳感器204)產(chǎn)生第二數(shù)據(jù)流，第二數(shù)據(jù)流包括第二 傳感器第一線數(shù)據(jù)912、第二傳感器第二線數(shù)據(jù)914、第二傳感器第三線數(shù)據(jù)916，和第二傳感器第四線數(shù)據(jù)918。來(lái)自第一數(shù)據(jù)流的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)經(jīng)組合以形成經(jīng)組合線920。在圖9中所說(shuō)明的特定實(shí)施例中，說(shuō)明第一線數(shù)據(jù)、第二線數(shù)據(jù)、第三線數(shù)據(jù)和第四線數(shù)據(jù)?；蛘?，可產(chǎn)生任何數(shù)目個(gè)線數(shù)據(jù)(例如，如圖6和7中所說(shuō)明的720條線)。在圖9的特定實(shí)施例中，在第一數(shù)據(jù)流的數(shù)據(jù)與第二數(shù)據(jù)流的數(shù)據(jù)之間存在一線相位差。舉例來(lái)說(shuō)，通過(guò)組合器(例如，圖2的組合器216)可在第一線相位期間接收第一傳感器第一線數(shù)據(jù)902，且可在第二線相位期間接收第一傳感器第二線數(shù)據(jù)904和第二傳感器第一線數(shù)據(jù)912。因而，在第一傳感器第一線數(shù)據(jù)902與第二傳感器第一線數(shù)據(jù)912之間存在一線相位差。經(jīng)組合線920包括圖像的第一圖像數(shù)據(jù)的第一線與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線的組合。如所說(shuō)明，第一數(shù)據(jù)流與第二數(shù)據(jù)流經(jīng)交錯(cuò)以形成經(jīng)組合線920。舉例來(lái)說(shuō)，經(jīng)組合線920包括具有第一傳感器第一線數(shù)據(jù)902和第二傳感器第一線數(shù)據(jù)912的經(jīng)組合線數(shù)據(jù)922，具有第一傳感器第二線數(shù)據(jù)904和第二傳感器第二線數(shù)據(jù)914的經(jīng)組合線數(shù)據(jù)924，具有第一傳感器第三線數(shù)據(jù)906和第二傳感器第三線數(shù)據(jù)916的經(jīng)組合線數(shù)據(jù)926，和具有第一傳感器第四線數(shù)據(jù)908和第二傳感器第四線數(shù)據(jù)918的經(jīng)組合線數(shù)據(jù)928?？赏ㄟ^(guò)在線緩沖器(例如，圖2的線緩沖器216)內(nèi)組合對(duì)應(yīng)線而產(chǎn)生每一經(jīng)組合線922到926。因而，來(lái)自多個(gè)傳感器的具有一線相位差的數(shù)據(jù)輸出可經(jīng)組合，使得可在圖像的圖像數(shù)據(jù)的一條圖像線內(nèi)發(fā)生同步。參看圖10，描繪說(shuō)明用于多個(gè)傳感器中的每一者的紅綠藍(lán)(RGB)數(shù)據(jù)且說(shuō)明同步數(shù)據(jù)線的圖解表示且將其大體上標(biāo)示為1000。在圖10中所說(shuō)明的實(shí)施例中，第一傳感器(例如，圖3的第一傳感器202)產(chǎn)生第一數(shù)據(jù)流，第一數(shù)據(jù)流包括第一傳感器第一線數(shù)據(jù)1002、第一傳感器第二線數(shù)據(jù)1004，和第一傳感器第三線數(shù)據(jù)1006。第二傳感器(例如，圖3的第二傳感器204)產(chǎn)生第二數(shù)據(jù)流，第二數(shù)據(jù)流包括第二傳感器第一線數(shù)據(jù)1012、第二傳感器第二線數(shù)據(jù)1014，和第二傳感器第三線數(shù)據(jù)1016。第三傳感器(例如，圖3的第N傳感器305)產(chǎn)生第三數(shù)據(jù)流，第三數(shù)據(jù)流包括第三傳感器第一線數(shù)據(jù)1022、第三傳感器第二線數(shù)據(jù)1024，和第三傳感器第三線數(shù)據(jù)1026。來(lái)自第一數(shù)據(jù)流的數(shù)據(jù)、來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)與來(lái)自第三數(shù)據(jù)流的數(shù)據(jù)經(jīng)組合以形成經(jīng)組合線1020。作為一說(shuō)明性實(shí)例,根據(jù)拜耳濾波器圖案(Bayer filter pattern),第一線數(shù)據(jù)1002、1012、1022中的每一者包括交替的紅色和綠色像素值，第二線數(shù)據(jù)1004、1014、1024中的每一者包括交替的綠色和藍(lán)色像素值，且第三線數(shù)據(jù)1006、1016、1026中的每一者包括交替的紅色和綠色像素值。如所說(shuō)明，第一數(shù)據(jù)流、第二數(shù)據(jù)流與第三數(shù)據(jù)流經(jīng)交錯(cuò)以形成經(jīng)組合線數(shù)據(jù)流1020。舉例來(lái)說(shuō)，經(jīng)組合線數(shù)據(jù)流1020包括具有第一傳感器第一線數(shù)據(jù)1002、第二傳感器第一線數(shù)據(jù)1012和第三傳感器第一線數(shù)據(jù)1002的經(jīng)組合線數(shù)據(jù)1040，具有第一傳感器第二線數(shù)據(jù)1004、第二傳感器第二線數(shù)據(jù)1014和第三傳感器第二線數(shù)據(jù)1024的經(jīng)組合線數(shù)據(jù)1050，和具有第一傳感器第三線數(shù)據(jù)1006、第二傳感器第三線數(shù)據(jù)1016和第三傳感器第三線數(shù)據(jù)1026的經(jīng)組合線數(shù)據(jù)1060。可通過(guò)在線緩沖器(例如，圖3的線緩沖器216)內(nèi) 組合對(duì)應(yīng)線而產(chǎn)生每一經(jīng)組合線1040到1060。每一經(jīng)組合線1040到1060可包括從待在圖像信號(hào)處理器(例如，圖3的圖像信號(hào)處理器208)處去馬賽克的其相應(yīng)傳感器線數(shù)據(jù)所讀取的原始像素(例如，R、G和B)值。因而，來(lái)自多個(gè)傳感器的數(shù)據(jù)輸出可經(jīng)組合，使得可在圖像的圖像數(shù)據(jù)的一條圖像線內(nèi)發(fā)生同步。盡管圖10將原始像素值說(shuō)明為包括根據(jù)拜耳濾波器圖案的RGB數(shù)據(jù)，但在其它實(shí)施例中，來(lái)自所述傳感器的線數(shù)據(jù)可能不包括拜耳RGB像素值。舉例來(lái)說(shuō)，作為說(shuō)明性非限制實(shí)例，所述傳感器可替代地提供亮度、藍(lán)色差色度、紅色差色度(YCbCr)值；青、黃、綠和洋紅(CYGM)值；紅、綠、藍(lán)和翠綠(RGBE)值；紅、綠、藍(lán)和白(RGBW)值；或任何其它類型的值?；蛘呋蛄硗?，所述傳感器中的一者或一者以上可實(shí)施全色單元(panchromatic cell)、感光器群組上的微透鏡、垂直彩色濾光片，或能夠逐線讀出原始圖像數(shù)據(jù)的任何其它傳感器技術(shù)。參看圖11，描繪說(shuō)明與具有多個(gè)傳感器的設(shè)備相關(guān)聯(lián)的信號(hào)時(shí)序的時(shí)序圖的特定實(shí)施例且將其大體上標(biāo)不為1100。所述信號(hào)包括第一傳感器的巾貞有效(FV)信號(hào)1102和線有效(LV)信號(hào)1104，第二傳感器的FV 1106和LV 1108，和第三傳感器的FV 1110和LV1112。在一特定實(shí)施例中,第一傳感器、第二傳感器和第三傳感器可為圖3的第一傳感器202、第二傳感器204和第三傳感器305。還結(jié)合經(jīng)組合的線有效/數(shù)據(jù)信號(hào)1116和線負(fù)載(LL)信號(hào)1118來(lái)說(shuō)明經(jīng)組合的幀有效信號(hào)1114。在一特定實(shí)施例中，信號(hào)1114到1118對(duì)應(yīng)于與幀(例如，由組合器產(chǎn)生的圖6的幀660)的一個(gè)或一個(gè)以上同步數(shù)據(jù)線相關(guān)的信令，且信號(hào)1102到1112對(duì)應(yīng)于在所述組合器處所接收的信令。如所說(shuō)明，從第一傳感器接收第一線數(shù)據(jù)1120、第二線數(shù)據(jù)1122和第三線數(shù)據(jù)1124，從第二傳感器接收第一線數(shù)據(jù)1130、第二線數(shù)據(jù)1132和第三線數(shù)據(jù)1134，且從第三傳感器接收第一線數(shù)據(jù)1140、第二線數(shù)據(jù)1142和第三線數(shù)據(jù)1144。在第一線數(shù)據(jù)1120和第一線數(shù)據(jù)1140之前從第二傳感器接收第一線數(shù)據(jù)1130。將第一線數(shù)據(jù)1130與第二線數(shù)據(jù)1120的接收之間的相位差說(shuō)明為第一相位差1180。在第三傳感器的第一線數(shù)據(jù)1140之前接收第一傳感器的第一線數(shù)據(jù)1120，且將第一傳感器的第一線數(shù)據(jù)1120與第三傳感器的第一線數(shù)據(jù)1140的接收之間的相位差說(shuō)明為第二相位差1182。來(lái)自所述傳感器中的每一者的線數(shù)據(jù)可遵循對(duì)應(yīng)幀有效信號(hào)的上升沿，從而指示經(jīng)由圖像數(shù)據(jù)線所接收的數(shù)據(jù)為來(lái)自每一特定傳感器的有效線數(shù)據(jù)。如所說(shuō)明，經(jīng)組合的幀有效線1114保持低，從而指示非有效數(shù)據(jù)，直到例如在圖2的組合器206處已接收第一線數(shù)據(jù)1120、1130和1140中的每一者之后為止。在已接收第一線1120、1130和1140中的每一者之后，經(jīng)組合的幀有效信號(hào)1114上升以指示線有效信號(hào)1116上的有效數(shù)據(jù)。結(jié)合在LL行1118上斷言的有效信號(hào)而產(chǎn)生第一同步數(shù)據(jù)線1150。在產(chǎn)生第一同步線數(shù)據(jù)1150之后，經(jīng)組合的幀有效信號(hào)1114保持于有效狀態(tài)中，而LL信號(hào)1118返回到非有效狀態(tài)，在此之后，在產(chǎn)生第二同步數(shù)據(jù)線1160后，LL信號(hào)1118即刻返回到有效狀態(tài)，在產(chǎn)生第二同步數(shù)據(jù)線1160之后產(chǎn)生第三同步數(shù)據(jù)線1170。參看圖12，描繪說(shuō)明來(lái)自第一傳感器的第一數(shù)據(jù)流、來(lái)自第二傳感器的第二數(shù)據(jù)流與來(lái)自第三傳感器的第三數(shù)據(jù)流之間的三線相位差的相位圖的第一實(shí)施例的圖解表示且將其大體上標(biāo)不為1200。第一傳感器(例如，圖3的第一傳感器202)產(chǎn)生第一數(shù)據(jù)流，第一數(shù)據(jù)流包括第一傳感器第一線數(shù)據(jù)1202、第一傳感器第二線數(shù)據(jù)1204、第一傳感器第三線數(shù)據(jù)1206，和第一傳感器第四線數(shù)據(jù)1208。第二傳感器(例如，圖3的第二傳感器204)產(chǎn)生第二數(shù)據(jù)流，第二數(shù)據(jù)流包括第二傳感器第一線數(shù)據(jù)1212、第二傳感器第二線數(shù) 據(jù)1214、第二傳感器第三線數(shù)據(jù)1216，和第二傳感器第四線數(shù)據(jù)1218。第三傳感器(例如，圖3的第N傳感器305)產(chǎn)生第三數(shù)據(jù)流，第三數(shù)據(jù)流包括第三傳感器第一線數(shù)據(jù)1222、第三傳感器第二線數(shù)據(jù)1224、第三傳感器第三線數(shù)據(jù)1226，和第三傳感器第四線數(shù)據(jù)1228。來(lái)自第一數(shù)據(jù)流的數(shù)據(jù)、來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)與來(lái)自第三數(shù)據(jù)流的數(shù)據(jù)經(jīng)組合以形成經(jīng)組合線1220。在圖12中所說(shuō)明的特定實(shí)施例中，說(shuō)明第一線數(shù)據(jù)、第二線數(shù)據(jù)、第三線數(shù)據(jù)和第四線數(shù)據(jù)?；蛘?，可產(chǎn)生任何數(shù)目個(gè)線數(shù)據(jù)(例如，如圖6和7中所說(shuō)明的720條線)。在一特定實(shí)施例中，在第一數(shù)據(jù)流的數(shù)據(jù)、第二數(shù)據(jù)流的數(shù)據(jù)與第三數(shù)據(jù)流的數(shù)據(jù)之間存在三線相位差。舉例來(lái)說(shuō)，通過(guò)組合器(例如，圖2的組合器216)可在第一線相位期間接收第三傳感器第一線數(shù)據(jù)1222，可在第二線相位期間接收第一傳感器第一線數(shù)據(jù)1202和第三傳感器第二線數(shù)據(jù)1224，可在第三線相位期間接收第一傳感器第二線數(shù)據(jù)1204和第三傳感器第三線數(shù)據(jù)1226，且可在第四線相位期間接收第一傳感器第三線數(shù)據(jù)1206、第二傳感器第一線數(shù)據(jù)1212和第三傳感器第四線數(shù)據(jù)1228。因而，在第一傳感器第一線數(shù)據(jù)1202、第二傳感器第一線數(shù)據(jù)1212與第三傳感器第一線數(shù)據(jù)1222之間存在三線相位差。經(jīng)組合線1220包括圖像的第一圖像數(shù)據(jù)的第一線與圖像的第二圖像數(shù)據(jù)的對(duì)應(yīng)線，與圖像的第三圖像數(shù)據(jù)的組合。如所說(shuō)明，第一數(shù)據(jù)流、第二數(shù)據(jù)流與第三數(shù)據(jù)流經(jīng)交錯(cuò)以形成經(jīng)組合線1220。舉例來(lái)說(shuō)，經(jīng)組合線1220包括具有第一傳感器第一線數(shù)據(jù)1202、第二傳感器第一線數(shù)據(jù)1212和第三傳感器第一線數(shù)據(jù)1222的經(jīng)組合線數(shù)據(jù)1232，具有第一傳感器第二線數(shù)據(jù)1204、第二傳感器第二線數(shù)據(jù)1214和第三傳感器第二線數(shù)據(jù)1224的經(jīng)組合線數(shù)據(jù)1234，和具有第一傳感器第三線數(shù)據(jù)1206、第二傳感器第三線數(shù)據(jù)1216和第三傳感器第三線數(shù)據(jù)1226的經(jīng)組合線數(shù)據(jù)1236。可通過(guò)在線緩沖器(例如，圖3的線緩沖器216)內(nèi)組合對(duì)應(yīng)線而產(chǎn)生每一經(jīng)組合線1232到1236。因而，來(lái)自多個(gè)傳感器的具有三線相位差的數(shù)據(jù)輸出可經(jīng)組合，使得可在圖像的圖像數(shù)據(jù)的一條圖像線內(nèi)發(fā)生同步。參看圖13，描繪用以組合來(lái)自多個(gè)傳感器的數(shù)據(jù)以產(chǎn)生3D數(shù)據(jù)的圖像處理系統(tǒng)的特定說(shuō)明性實(shí)施例且將其大體上標(biāo)示為1300。圖像處理系統(tǒng)1300包括第一圖像傳感器1302和第二圖像傳感器1304。圖像處理系統(tǒng)1300進(jìn)一步包括組合器1306和圖像處理器1308。圖像處理器1308耦合到顯示裝置1310。組合器1306包括至少一個(gè)線緩沖器1312。圖像處理系統(tǒng)1300可集成于至少一個(gè)半導(dǎo)體裸片中。第一圖像傳感器1302經(jīng)配置以產(chǎn)生第一數(shù)據(jù)流，說(shuō)明為第一圖像數(shù)據(jù)流1314，且第二圖像傳感器1304經(jīng)配置以產(chǎn)生第二數(shù)據(jù)流，說(shuō)明為第二圖像數(shù)據(jù)流1316。在一特定實(shí)施例中，第一圖像數(shù)據(jù)流1314可與第二圖像數(shù)據(jù)流1316異步。第一圖像傳感器1302和第二圖像傳感器1304可為實(shí)質(zhì)上類似的圖像傳感器，第一圖像傳感器1302與第二圖像傳感器1304彼此獨(dú)立且可接收來(lái)自處理器(例如，組合器1306或圖像處理器1308)的共同控制信號(hào)以產(chǎn)生緊密對(duì)準(zhǔn)的圖像數(shù)據(jù)流1314、1316。舉例來(lái)說(shuō)，圖像數(shù)據(jù)流1314、1316可具有實(shí)質(zhì)上相同的時(shí)序特性，例如頻率和相位。因?yàn)樗龉餐刂菩盘?hào)可由處理器(例如)經(jīng)由圖2的信號(hào)同步器230產(chǎn)生，所以圖像傳感器1302、1304中的每一者可直接響應(yīng)于所述單一處理器且由所述單一處理器控制。盡管已展示兩個(gè)圖像傳感器1302、1304，但應(yīng)理解，兩個(gè)以上圖像傳感器可與圖像處理系統(tǒng)1300 —起使用。 組合器1306響應(yīng)于第一圖像數(shù)據(jù)流1314和第二圖像數(shù)據(jù)流1316。組合器1306經(jīng)配置以在線緩沖器1312內(nèi)組合來(lái)自第一圖像數(shù)據(jù)流1314的數(shù)據(jù)與來(lái)自第二圖像數(shù)據(jù)流1316的數(shù)據(jù)。在一特定實(shí)施例中，線緩沖器1312經(jīng)配置以使來(lái)自第一圖像傳感器1302的第一數(shù)據(jù)與來(lái)自第二圖像傳感器1304的第二數(shù)據(jù)對(duì)準(zhǔn)。在一特定實(shí)施例中，組合器1306響應(yīng)于存儲(chǔ)于線緩沖器1312內(nèi)的數(shù)據(jù)且將幀數(shù)據(jù)1318提供到圖像處理器1308。在一特定實(shí)施例中，幀數(shù)據(jù)1318可包括圖像數(shù)據(jù)的多個(gè)行，其中每一行為來(lái)自每一傳感器1302、1304的對(duì)應(yīng)行的組合，例如關(guān)于圖3所描述。圖像處理器1308經(jīng)配置以處理幀數(shù)據(jù)1318且將經(jīng)處理幀數(shù)據(jù)1320輸出到顯示裝置1310。經(jīng)處理幀數(shù)據(jù)1320可具有3D圖像格式或3D視頻格式。顯示裝置1310響應(yīng)于接收到經(jīng)處理幀數(shù)據(jù)1320而再現(xiàn)且顯示圖像數(shù)據(jù)。因此，來(lái)自多個(gè)圖像傳感器的圖像數(shù)據(jù)可經(jīng)組合、處理且接著再現(xiàn)以用于在顯示裝置1310處顯示。在一特定實(shí)施例中，顯示裝置1310可與圖像處理器1308解耦以不直接響應(yīng)于圖像處理器1308。舉例來(lái)說(shuō)，顯示裝置1310可為與圖像處理器1308分離的裝置。因?yàn)閺谋还餐刂频念愃茍D像傳感器1302、1304接收的數(shù)據(jù)可具有實(shí)質(zhì)上相同的頻率和相位，所以可在圖像數(shù)據(jù)的單一圖像線內(nèi)發(fā)生數(shù)據(jù)流1314、1316之間的同步。在一特定實(shí)施例中，線緩沖器1312可針對(duì)未對(duì)準(zhǔn)的最差狀況設(shè)定尺寸(S卩，如果同步未對(duì)準(zhǔn)為三條線，則線緩沖器1312應(yīng)經(jīng)設(shè)定大小以存儲(chǔ)至少六條線)。結(jié)果，可使用單一圖像處理器1308有效地處理經(jīng)組合數(shù)據(jù)。因此，與多處理器系統(tǒng)相比(例如，向每一傳感器指派一處理器)，總的圖像系統(tǒng)成本和復(fù)雜性可減小。多個(gè)實(shí)施例可經(jīng)配置以提供3D/立體圖像和/或視頻數(shù)據(jù)。舉例來(lái)說(shuō)，在一個(gè)此類實(shí)施例中，第一圖像傳感器1302和第二圖像傳感器1304可并排地定位，以便提供左/右(立體)圖像。由組合器1306提供的信號(hào)被接收且可由圖像處理器1308處理以產(chǎn)生3D圖像。用戶命令可允許圖像處理器1308接收且處理來(lái)自僅單一傳感器(即，第一圖像傳感器1302或第二圖像傳感器1304)的數(shù)據(jù)，以產(chǎn)生二維(2D)圖像來(lái)代替于產(chǎn)生3D圖像。具有用于單一相機(jī)的輸入的圖像處理器(例如，圖像處理器1308)能夠通過(guò)使用由組合器1306提供的來(lái)自兩個(gè)相機(jī)的經(jīng)組合數(shù)據(jù)來(lái)處理可用于3D處理的數(shù)據(jù)。圖像處理器1308可接收來(lái)自組合器1306或來(lái)自存儲(chǔ)來(lái)自組合器1306的圖像數(shù)據(jù)的存儲(chǔ)器的圖像數(shù)據(jù)。在一個(gè)此類實(shí)施例中，圖像處理器1308將所接收的圖像數(shù)據(jù)處理為2D圖像/視頻數(shù)據(jù)，使得圖像處理器1308的后續(xù)處理基于來(lái)自圖像處理器1308的經(jīng)處理數(shù)據(jù)提供3D立體圖像/視頻流?；蛘撸瑘D像處理器1308可經(jīng)配置以基于所接收的圖像數(shù)據(jù)直接提供3D立體圖像/視頻流。在一實(shí)施例中，3D俘獲系統(tǒng)包含實(shí)施為第一集成電路的組合器1306和實(shí)施為第二集成電路的圖像處理器1308。第一集成電路與第二集成電路可(例如)通過(guò)串行、并行或I2C總線中的一者或一者以上連接。組合圖像數(shù)據(jù)流1314、1316以產(chǎn)生幀數(shù)據(jù)1318使得圖像處理器1308能夠執(zhí)行用于多相機(jī)3D處理的格式化，即使圖像處理器1308具有單一相機(jī)輸入仍如此。結(jié)果，與使用單獨(dú)處理器用于每一相機(jī)或使用具有多個(gè)相機(jī)輸入的處理器的系統(tǒng)相比，系統(tǒng)1300可以減小的成本來(lái)實(shí)施。參看圖14，描繪說(shuō)明具有用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)的移動(dòng)裝置的各種實(shí)施例的圖解表示且將其大體上標(biāo)示為1400。在1402處所說(shuō)明的特定實(shí) 施例中，移動(dòng)裝置包括具有兩個(gè)鄰近相機(jī)的陣列的圖像處理系統(tǒng)。在1404處所說(shuō)明的特定實(shí)施例中，移動(dòng)裝置包括具有布置在同軸(in-line)配置中的三個(gè)相機(jī)的陣列的圖像處理系統(tǒng)?；蛘?，任何數(shù)目個(gè)相機(jī)可布置在同軸配置中。在1406處所說(shuō)明的特定實(shí)施例中，移動(dòng)裝置包括具有3X3相機(jī)陣列的圖像處理系統(tǒng)。在1408處所說(shuō)明的特定實(shí)施例中，移動(dòng)裝置包括具有5X5相機(jī)陣列的圖像處理系統(tǒng)?；蛘?，任何數(shù)目個(gè)相機(jī)可布置在二維陣列中。參看圖15，說(shuō)明由多個(gè)相機(jī)或圖像傳感器俘獲的圖像的陣列的實(shí)例且將其大體上標(biāo)示為1500。如圖15中所說(shuō)明，由一個(gè)相機(jī)俘獲的圖像可與由其它相鄰相機(jī)俘獲的圖像重疊。在將由所述相機(jī)中的每一者俘獲的圖像組合成單一圖像時(shí)，圖像重疊可為有用的。在圖15中所說(shuō)明的特定實(shí)施例中，陣列1500對(duì)應(yīng)于相機(jī)或圖像傳感器的4X4陣列?；蛘?，任何數(shù)目個(gè)相機(jī)可布置在二維陣列中(例如，如圖18和19中所說(shuō)明的5X5陣列)。每一相機(jī)俘獲陣列1500的單一相機(jī)圖像。在圖15中所說(shuō)明的實(shí)施例中，陣列1500為4X4陣列。因而，陣列1500包括第一行1502、第二行1504、第三行1506和第四列1508。此外，陣列1500包括第一列1510、第二列1512、第三列1514和第四列1516。作為一說(shuō)明性實(shí)例，可由對(duì)應(yīng)于第一行1502和第四行1516的相機(jī)俘獲單一相機(jī)圖像1518。單一相機(jī)圖像1518可與由相鄰單元的其它相機(jī)俘獲的相機(jī)圖像重疊。在對(duì)應(yīng)于第一行1502和第四列1516的相機(jī)的狀況下，相鄰單元的相機(jī)可包括對(duì)應(yīng)于第一行1502和第三列1514的相機(jī)、對(duì)應(yīng)于第二行1504和第三列1514的相機(jī)，或?qū)?yīng)于第二行1504和第四列1516的相機(jī)。舉例來(lái)說(shuō)，單一相機(jī)圖像重疊1520可與由對(duì)應(yīng)于第一行1502和第四列1516的相機(jī)俘獲的單一相機(jī)圖像1508相關(guān)聯(lián)。圖15說(shuō)明行1502到1508中的每一者的每一相機(jī)和列1510到1516中的每一者的每一相機(jī)的絕對(duì)對(duì)準(zhǔn)的理論狀況。因而，與由對(duì)應(yīng)于相鄰行(例如，第二行1504)的相機(jī)俘獲的圖像的圖像重疊可和與由對(duì)應(yīng)于相鄰列(例如，第三列1514)的相機(jī)俘獲的圖像的圖像重疊相同?？稍谔囟ㄋ椒直媛?“H-res”)下俘獲個(gè)別圖像。為了說(shuō)明，水平分辨率1522可與由對(duì)應(yīng)于第一行1502和第四列1516的相機(jī)俘獲的單一相機(jī)圖像1518相關(guān)聯(lián)。圖15說(shuō)明在每一相機(jī)具有相同水平分辨率1522的情況下圖像重疊的理論狀況。因而，可基于個(gè)別相機(jī)的水平分辨率1522與一行中單元的數(shù)目(“η”)的組合來(lái)計(jì)算總水平分辨率1524( SP，在行1502到1508中的每一者中的像素的數(shù)目)。在圖15的4X4陣列1500的狀況下，在每一行中存在四個(gè)單元(即，與列1510到1516中的每一者相關(guān)聯(lián)的單元)?？偹椒直媛?524可考慮圖像重疊。舉例來(lái)說(shuō),可將總水平分辨率1524計(jì)算為H_res*n-overlap*(n-2),其中overlap指示鄰近圖像的重疊像素的數(shù)目。可執(zhí)行類似計(jì)算以確定總垂直分辨率。圖15說(shuō)明具有相同圖像重疊的每一相機(jī)的絕對(duì)對(duì)準(zhǔn)的理論狀況。由所述個(gè)別相機(jī)俘獲的圖像之間的圖像重疊可允許個(gè)別圖像中的每一者“縫合在一起”成為單一圖像。參看圖16，說(shuō)明由多個(gè)相機(jī)或圖像傳感器俘獲的圖像的陣列的實(shí)例且將其大體上標(biāo)示為1600。如圖16中所說(shuō)明，由一個(gè)相機(jī)俘獲的圖像可與由其它相鄰相機(jī)俘獲的圖像重疊。在將由所述相機(jī)中的每一者俘獲的圖像組合成單一圖像時(shí)，圖像重疊可為有用的。在圖16中所說(shuō)明的特定實(shí)施例中，陣列1600對(duì)應(yīng)于相機(jī)或圖像傳感器的4X4陣列?；蛘?，任何數(shù)目個(gè)相機(jī)可布置在二維陣列中。圖16說(shuō)明歸因于機(jī)械約束，實(shí)現(xiàn)在行或列上相機(jī)的絕對(duì)對(duì)準(zhǔn)(如圖15中所說(shuō)明)可能并不可行。
陣列1600的每一圖像可具有其自己的旋轉(zhuǎn)1602、移位1604和傾斜(未圖示)。一個(gè)或一個(gè)以上定位容限1606可與每一圖像相關(guān)聯(lián)。定位容限1606可包括旋轉(zhuǎn)容限、移位容限、傾斜容限或其組合。在將由所述相機(jī)中的每一者俘獲的圖像組合成單一圖像時(shí)，圖像重疊可為有用的。圖16說(shuō)明在組合所述圖像時(shí)所使用的圖像重疊可考慮由與建造裝置相關(guān)聯(lián)的機(jī)械約束引起的每一圖像的旋轉(zhuǎn)1602、移位1604和傾斜。一旦裝置被建造，則圖像重疊可為已知且穩(wěn)定的。因而，圖像重疊可經(jīng)量化且可在稍后階段校正。參看圖17，說(shuō)明相機(jī)陣列和與所述陣列相關(guān)聯(lián)的電連接的特定實(shí)施例且將其大體上標(biāo)示為1700。圖17說(shuō)明陣列1700的每一相機(jī)具有第一類型的接口(即，數(shù)據(jù)接口 1702)和第二類型的接口(即，控制接口 1704)。在圖17中所說(shuō)明的實(shí)施例中，陣列1700包括3X3相機(jī)陣列?；蛘撸嚵?700可包括布置在4X4陣列中的相機(jī)(例如，圖15和16的陣列1500、1600)，或布置在二維陣列中的任何其它數(shù)目個(gè)相機(jī)。數(shù)據(jù)接口 1702可包括串行數(shù)據(jù)總線(例如，移動(dòng)產(chǎn)業(yè)處理器接口(MobileIndustryProcessor Interface)或標(biāo)準(zhǔn)移動(dòng)成像架構(gòu)接口(Standard Mobile ImagingArchitectureinterface)) 圖17中的數(shù)據(jù)接口 1702與陣列1700的第一線1706、陣列1700的第二行1708和陣列1700的第三行1710相關(guān)聯(lián)。與數(shù)據(jù)接口 1702相關(guān)聯(lián)的線可用于收集待并行地處理的來(lái)自行1706到1710中的每一者中的相機(jī)的數(shù)據(jù)。作為一說(shuō)明性實(shí)例，對(duì)于高達(dá)5百萬(wàn)像素(mpix)的分辨率和每秒十幀，可能需要四根導(dǎo)線(例如，差分?jǐn)?shù)據(jù)和時(shí)鐘)。在圖17的說(shuō)明性3X3陣列1700中，行1706到1710中的每一者包括陣列1700的第一列1712中的相機(jī)、陣列1700的第二列1714中的相機(jī)，和陣列1700的第三列1716中的相機(jī)。因此，數(shù)據(jù)接口 1702可用于收集待并行地處理的來(lái)自九個(gè)相機(jī)的數(shù)據(jù)?？刂平涌?1704可包括用以同步陣列1700中的所有相機(jī)的線。舉例來(lái)說(shuō)，控制接口行可與時(shí)鐘、復(fù)位和I2C通信相關(guān)聯(lián)。在圖17的說(shuō)明性3X3陣列1700中，控制接口 1704可用于同步陣列1700的九個(gè)相機(jī)。參看圖18，說(shuō)明相機(jī)陣列處理系統(tǒng)的特定實(shí)施例且將其大體上標(biāo)示為1800。在所得圖像數(shù)據(jù)組合成最終圖像之前，陣列1802中的所有相機(jī)可響應(yīng)于共同控制信號(hào)，經(jīng)對(duì)準(zhǔn)且處理。在圖18中所說(shuō)明的實(shí)施例中，陣列1802包括5X5相機(jī)陣列?；蛘?，陣列1802可包括布置在二維陣列中的任何其它數(shù)目個(gè)相機(jī)(例如，圖17的3X3陣列1700)。陣列1802中的所有相機(jī)可用使用單一 ISP管線的并發(fā)圖像傳感器支持的方法來(lái)同步。此外，相機(jī)的每一行可使用對(duì)準(zhǔn)方法來(lái)對(duì)準(zhǔn)。即，圖像的一行可被收集、以相同次序?qū)?zhǔn)，且被發(fā)送以用于處理為具有大小inline的單一線，其中η為一行中的相機(jī)的數(shù)目且line為一個(gè)相機(jī)的水平大小(即，如圖15中所描述的“H_res”)。圖18中所說(shuō)明的5X5陣列1802包括第一行1804、第二行1806、第三行1808、第四行1810和第五行1812。此外，5X5陣列1802包括第一列1814、第二列1816、第三列1818、第四列1820和第五列1822。行1804到1812中的每一者的色彩可在VFE組件處并行地處理，且可在圖形處理器或圖形處理單元(GPU)組件處處理行1804到1812中的每一者以對(duì)準(zhǔn)且修整一行中的每一個(gè)別圖像。在修整和對(duì)準(zhǔn)之后，可執(zhí)行GPU處理以將行1804到1812中的全部行組合在一起，從而產(chǎn)生最終圖像。第一行1804可與第一對(duì)準(zhǔn)塊1824相關(guān)聯(lián)，第二行1806可與第二對(duì)準(zhǔn)塊1826相關(guān) 聯(lián)，第三行1808可與第三對(duì)準(zhǔn)塊1828相關(guān)聯(lián)，第四行1810可與第四對(duì)準(zhǔn)塊1830相關(guān)聯(lián)，且第五行1812可與第五對(duì)準(zhǔn)塊1832相關(guān)聯(lián)。為了說(shuō)明，第一對(duì)準(zhǔn)塊1824可適于收集來(lái)自第一行1804中的每一相機(jī)(即，陣列1802的五個(gè)列1814到1822中的五個(gè)相機(jī))的圖像數(shù)據(jù)線。第一對(duì)準(zhǔn)塊1824可適于以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線且發(fā)送所述圖像數(shù)據(jù)線以用于處理為單一線。第一對(duì)準(zhǔn)塊1824可適于將用于處理為單一線的圖像數(shù)據(jù)線發(fā)送到第一 VFE組件1834以針對(duì)色彩進(jìn)行處理，例如關(guān)于圖2、3和5的組合器206所描述。可基于相機(jī)的數(shù)目(即，五個(gè)相機(jī))和第一行1804中的每一相機(jī)的水平大小(即，如圖15中所描述的“H_res”)來(lái)確定所述單一線的大小。第二對(duì)準(zhǔn)塊1826可適于收集來(lái)自第二行1806中的每一相機(jī)的圖像，以相同次序?qū)?zhǔn)所述圖像，且將用于處理為單一線的圖像發(fā)送到第二 VFE組件1836。第三對(duì)準(zhǔn)塊1828可適于收集來(lái)自第三行1808中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且將用于處理為單一線的圖像數(shù)據(jù)線發(fā)送到第三VFE組件1838。第四對(duì)準(zhǔn)塊1830可適于收集來(lái)自第四行1810中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且將用于處理為單一線的圖像數(shù)據(jù)線發(fā)送到第四VFE組件1840。第五對(duì)準(zhǔn)塊1832可適于收集來(lái)自第五行1812中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且將用于處理為單一線的圖像數(shù)據(jù)線發(fā)送到第五VFE組件1842?？刂仆綁K1844可用于以類似于傳感器同步器230的方式同步陣列1802的相機(jī)中的每一者(S卩，在圖18的說(shuō)明性5X5陣列1802的狀況下的二十五個(gè)相機(jī))。在一特定實(shí)施例中，控制同步塊1834可實(shí)施圖17的控制接口 1704?？刂仆綁K1844可以通信方式耦合到陣列1802的相機(jī)中的每一者且耦合到VFE組件1834到1842中的每一者。陣列1802中的所有相機(jī)的同步可允許高分辨率上的滾動(dòng)快門(mén)(rolling shutter)的使用。由于所有相機(jī)可同時(shí)讀出，所以滾動(dòng)快門(mén)效應(yīng)可減弱(隨著陣列的大小)。舉例來(lái)說(shuō)，在圖18的5X5陣列1802中，二十五個(gè)相機(jī)的同步可減弱與互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)相機(jī)相關(guān)聯(lián)的滾動(dòng)快門(mén)效應(yīng)。第一 VFE組件1834可以通信方式耦合到第一 GPU組件1846以對(duì)準(zhǔn)且修整第一行1804中的每一個(gè)別圖像(即，由五個(gè)列1814到1822中的相機(jī)俘獲的五個(gè)圖像)。第二 VFE組件1836可以通信方式耦合到第二 GPU組件1848以對(duì)準(zhǔn)且修整第二行1806中的每一個(gè)別圖像。第三VFE組件1838可以通信方式耦合到第三GPU組件1850以對(duì)準(zhǔn)且修整第三行1808中的每一個(gè)別圖像。第四VFE組件1840可以通信方式耦合到第四GPU組件1852以對(duì)準(zhǔn)且修整第四行1810中的每一個(gè)別圖像。第五VFE組件1842可以通信方式耦合到第五GPU組件1854以對(duì)準(zhǔn)且修整第五行1812中的每一個(gè)別圖像。GPU組件1846到1854中的每一者可以通信方式耦合到GPU處理組件1856，GPU處理組件1856適于將行1804到1812中的全部行組合在一起，從而產(chǎn)生最終圖像。在圖18中所說(shuō)明的實(shí)施例中，對(duì)準(zhǔn)塊1824到1832中的每一者與其自己的VFE組件和其自己的GPU修整和對(duì)準(zhǔn)組件相關(guān)聯(lián)。因此，圖18說(shuō)明行1804到1812中的每一者的色彩可使用單獨(dú)VFE組件并行地處理，且可使用單獨(dú)GPU組件處理行1804到1812中的每一者以對(duì)準(zhǔn)且修整特定行中的每一個(gè)別圖像?；蛘?，對(duì)準(zhǔn)塊1824到1832中的每一者可與單一 VFE組件和單一 GPU修整和對(duì)準(zhǔn)組件相關(guān)聯(lián)(參見(jiàn)圖19)。 參看圖19，說(shuō)明相機(jī)陣列處理系統(tǒng)的特定實(shí)施例且將其大體上標(biāo)示為1900。在組合成最終圖像之前，陣列1902中的所有相機(jī)可經(jīng)同步，對(duì)準(zhǔn)且處理。在圖19中所說(shuō)明的實(shí)施例中，陣列1902包括5 X 5相機(jī)陣列?；蛘?，陣列1902可包括布置在二維陣列中的任何其它數(shù)目個(gè)相機(jī)。圖19說(shuō)明單一 VFE組件和單一 GPU修整以及對(duì)準(zhǔn)組件可用于處理陣列1902的所有行，而非圖18中所說(shuō)明的多個(gè)VFE組件和GPU修整以及對(duì)準(zhǔn)組件。圖19中所說(shuō)明的5X5陣列1902包括第一行1904、第二行1906、第三行1908、第四行1910和第五行1912。此外，5X5陣列1902包括第一列1914、第二列1916、第三列1918、第四列1920和第五列1922。第一行1904可與第一對(duì)準(zhǔn)塊1924相關(guān)聯(lián)，第二行1906可與第二對(duì)準(zhǔn)塊1926相關(guān)聯(lián)，第三行1908可與第三對(duì)準(zhǔn)塊1928相關(guān)聯(lián)，第四行1910可與第四對(duì)準(zhǔn)塊1930相關(guān)聯(lián)，且第五行1912可與第五對(duì)準(zhǔn)塊1932相關(guān)聯(lián)。為了說(shuō)明，第一對(duì)準(zhǔn)塊1924可適于收集來(lái)自第一行1904中的每一相機(jī)(即，陣列1902的五個(gè)列1914到1922中的五個(gè)相機(jī))的圖像數(shù)據(jù)線。第一對(duì)準(zhǔn)塊1924可適于以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線且發(fā)送所述圖像數(shù)據(jù)線以用于處理為單一線。第二對(duì)準(zhǔn)塊1926可適于收集來(lái)自第二行1906中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且發(fā)送所述圖像數(shù)據(jù)線以用于處理為單一線。第三對(duì)準(zhǔn)塊1928可適于收集來(lái)自第三行1908中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且發(fā)送所述圖像數(shù)據(jù)線以用于處理為單一線。第四對(duì)準(zhǔn)塊1930可適于收集來(lái)自第四行1910中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且發(fā)送所述圖像數(shù)據(jù)線以用于處理為單一線。第五對(duì)準(zhǔn)塊1932可適于收集來(lái)自第五行1912中的每一相機(jī)的圖像數(shù)據(jù)線，以相同次序?qū)?zhǔn)所述圖像數(shù)據(jù)線，且發(fā)送所述圖像數(shù)據(jù)線以用于處理為單一線。在圖19中所說(shuō)明的實(shí)施例中，對(duì)準(zhǔn)塊1924到1932中的每一者可適于將其用于處理的圖像發(fā)送到單一 VFE組件1934以針對(duì)色彩進(jìn)行處理。單一 VFE組件1934可處理從五個(gè)對(duì)準(zhǔn)塊1924到1932發(fā)送的五條線中的每一者。如上文所提及，可基于特定行中的相機(jī)的數(shù)目(即，五個(gè)相機(jī))和所述特定行中的每一相機(jī)的水平大小(即，如圖15中所描述的“H_res”)來(lái)確定來(lái)自特定對(duì)準(zhǔn)塊的單一線的大小。因而，由圖19的單一 VFE組件1934處理的多條線的大小可為由圖18的VFE組件1834到1842中的一者處理的單一線的大小的五倍?？刂仆綁K1936可用于同步陣列1902的相機(jī)中的每一者，例如將共同控制信號(hào)提供到一個(gè)或一個(gè)以上行1904到1912中的相機(jī)。控制同步塊1936可以通信方式耦合到陣列1902的相機(jī)中的每一者且耦合到單一 VFE組件1934。陣列1902中的所有相機(jī)的同步可允許高分辨率上的滾動(dòng)快門(mén)的使用。由于所有相機(jī)可同時(shí)讀出，所以滾動(dòng)快門(mén)效應(yīng)可減弱(隨著陣列的大小)。舉例來(lái)說(shuō)，在圖19的5X5陣列1902中，二十五個(gè)相機(jī)的同步可減弱與CMOS相機(jī)相關(guān)聯(lián)的滾動(dòng)快門(mén)效應(yīng)。單一 VFE組件1934可以通信方式耦合到單一 GPU組件1938以對(duì)準(zhǔn)且修整行1904到1912中的每一者中的每一個(gè)別圖像。因而，與由圖18的GPU對(duì)準(zhǔn)和修整組件1846到1854中的每一者處理的五個(gè)圖像相比，圖19的單一 GPU組件1938可對(duì)準(zhǔn)且修整二十五個(gè)圖像。單一 GPU組件1938可以通信方式耦合到GPU處理組件1940，GPU處理組件1940適于將行1904到1912中的全部行組合在一起，從而產(chǎn)生最終圖像。圖20說(shuō)明包括經(jīng)配置以聚焦傳入光2004的主透鏡2002和布置在陣列2006中的 多個(gè)相機(jī)的高分辨率數(shù)字相機(jī)系統(tǒng)2000。通過(guò)組合在陣列2006中的相機(jī)中的每一者處所俘獲的圖像，高分辨率圖像可產(chǎn)生為復(fù)合(或“馬賽克”)圖像。舉例來(lái)說(shuō)，陣列2006的相機(jī)中的每一者可為CMOS型相機(jī)或電荷耦合裝置(CCD)型相機(jī)。主透鏡2002可將所俘獲場(chǎng)景聚焦到平面2008(被稱作主透鏡2002的“焦平面”或陣列2006中的相機(jī)的“物平面”)，且陣列2006中的每一相機(jī)可俘獲總圖像的一部分。陣列2006的每一相機(jī)具有一視場(chǎng)，所述視場(chǎng)在平面2008處部分地重疊其相鄰者的視場(chǎng)。此重疊可使得由陣列2006中的相鄰相機(jī)拍攝的圖像能夠在逐行基礎(chǔ)上對(duì)準(zhǔn)且在后續(xù)處理期間“縫合”在一起，且可提供對(duì)所述陣列內(nèi)的相機(jī)的非理想位置和對(duì)準(zhǔn)的容限(例如關(guān)于圖16所描述)?？赏ㄟ^(guò)在逐行基礎(chǔ)上對(duì)準(zhǔn)來(lái)自陣列2006的相機(jī)的圖像數(shù)據(jù)而產(chǎn)生復(fù)合圖像。舉例來(lái)說(shuō)，圖20的陣列2006包括具有三個(gè)行的3X3陣列。陣列2006的特定行(“陣列行”)內(nèi)的每一相機(jī)可包括具有布置在列和行中的光檢測(cè)器的圖像傳感器(“傳感器列”和“傳感器行”)。一陣列行內(nèi)的相機(jī)可經(jīng)定位以使得傳感器行實(shí)質(zhì)上對(duì)準(zhǔn)。為了說(shuō)明，一陣列行中的每一相機(jī)的第一傳感器行與同一陣列行中的每隔一個(gè)相機(jī)的相機(jī)的第一傳感器行實(shí)質(zhì)上對(duì)準(zhǔn)。在圖像俘獲期間，從一陣列行中的每一相機(jī)讀取具有圖像數(shù)據(jù)的第一傳感器行，且將其提供到圖像處理電路(例如關(guān)于圖17到19所描述)。根據(jù)所述陣列行中的每一相機(jī)的位置合并來(lái)自第一傳感器行的圖像數(shù)據(jù)。以如同經(jīng)合并的圖像數(shù)據(jù)是來(lái)自較大相機(jī)的圖像數(shù)據(jù)的單一行的方式來(lái)處理經(jīng)合并的圖像數(shù)據(jù)。讀取、合并第二、第三和后續(xù)圖像傳感器行，且將其提供到圖像處理電路以處理為復(fù)合圖像的行。每一陣列行可與其它陣列行并行地處理。圖20的布置可提供對(duì)高分辨率相機(jī)的廉價(jià)替代物。舉例來(lái)說(shuō)，可使用主透鏡后方的二十個(gè)5百萬(wàn)像素(mpix)的CMOS相機(jī)來(lái)建造100百萬(wàn)像素(mpix)相機(jī)。因?yàn)榭墒褂枚鄠€(gè)CMOS相機(jī)來(lái)執(zhí)行圖像俘獲，其中每一相機(jī)俘獲圖像的一部分，所以與俘獲整個(gè)圖像的單一 IOOmpix的CMOS相機(jī)相比，“滾動(dòng)快門(mén)”假影可減少。參看圖21，描繪多相機(jī)模塊的實(shí)施方案的特定實(shí)施例且將其大體上標(biāo)示為2100。系統(tǒng)2100說(shuō)明安裝于汽車(chē)上的多相機(jī)模塊，例如如圖I到5中所說(shuō)明的多相機(jī)模塊。多相機(jī)模塊可經(jīng)配置以產(chǎn)生用于格式化為三維圖像或視頻數(shù)據(jù)的同步線數(shù)據(jù)幀，例如關(guān)于圖6到7所描述。通過(guò)將多相機(jī)模塊安裝到汽車(chē)的后部，可獲得三維視圖以在倒車(chē)的同時(shí)在內(nèi)部顯示器(未圖示)上向汽車(chē)的操作者提供深度感覺(jué)。應(yīng)理解，多相機(jī)模塊可安裝到任何類型的車(chē)輛，而不限于汽車(chē)。參看圖22，描繪將來(lái)自多個(gè)傳感器的數(shù)據(jù)組合成同步數(shù)據(jù)線的方法的特定說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為2200。作為一說(shuō)明性實(shí)例，方法2200可由圖2的系統(tǒng)、圖3的系統(tǒng)、圖5的系統(tǒng)或其任何組合執(zhí)行。在2202處，可將共同控制信號(hào)提供到待同步的多個(gè)圖像傳感器。舉例來(lái)說(shuō)，所述共同控制信號(hào)可包括共同時(shí)鐘信號(hào)和共同復(fù)位信號(hào)，例如圖4中所描繪的共同控制信號(hào)404 到 410。 在2204處，可接收來(lái)自所述多個(gè)圖像傳感器中的第一圖像傳感器的第一數(shù)據(jù)線。在2206處，可接收來(lái)自所述多個(gè)圖像傳感器中的第二圖像傳感器的第二數(shù)據(jù)線。舉例來(lái)說(shuō)，第一傳感器和第二傳感器可為圖2的傳感器202、204。在2208處，所述第一數(shù)據(jù)線與所述第二數(shù)據(jù)線可為經(jīng)組合線以產(chǎn)生同步數(shù)據(jù)線。舉例來(lái)說(shuō)，方法2200可包括在逐線基礎(chǔ)上交錯(cuò)從第一圖像傳感器接收的第一數(shù)據(jù)流與從第二圖像傳感器接收的第二數(shù)據(jù)流。如關(guān)于圖5中所說(shuō)明的組合第一傳感器圖像數(shù)據(jù)422與第二傳感器圖像數(shù)據(jù)432的組合器406所描述，可形成同步數(shù)據(jù)線。同步數(shù)據(jù)線可形成幀(例如，圖6的幀660)的部分。所述幀可包括包括來(lái)自第一圖像傳感器的第一圖像數(shù)據(jù)的第一區(qū)段(例如，第一區(qū)段652)、包括來(lái)自第二圖像傳感器的第二圖像數(shù)據(jù)的第二區(qū)段(例如，第二區(qū)段654)，和包括安置于第一區(qū)段與第二區(qū)段之間的非圖像數(shù)據(jù)的間隙區(qū)段(例如，間隙區(qū)段656)。在其它實(shí)施例中，所述幀可能不包括第一區(qū)段與第二區(qū)段之間的間隙區(qū)段。可在完成接收第二數(shù)據(jù)線之前完成接收第一數(shù)據(jù)線，且可在完成接收第二數(shù)據(jù)線之后產(chǎn)生同步數(shù)據(jù)線。作為一實(shí)例，在已接收第二傳感器第一線數(shù)據(jù)812之后產(chǎn)生圖8的經(jīng)組合數(shù)據(jù)線822。在具有兩個(gè)以上圖像傳感器的實(shí)施例中，可從所述多個(gè)圖像傳感器中的第三圖像傳感器接收第三數(shù)據(jù)線，例如圖11中所說(shuō)明。第三數(shù)據(jù)線可與第一數(shù)據(jù)線和第二數(shù)據(jù)線組合以產(chǎn)生同步數(shù)據(jù)線，例如圖11的第一同步數(shù)據(jù)線1150。參看圖23，描繪將共同控制信號(hào)提供到多個(gè)圖像傳感器且經(jīng)由圖像處理器的單一相機(jī)輸入將同步數(shù)據(jù)線提供到圖像處理器的方法的特定說(shuō)明性實(shí)施例的流程圖，且將其大體上標(biāo)示為2300。作為說(shuō)明性非限制實(shí)例，方法2300可在圖2、3和5的系統(tǒng)中的一者或一者以上處執(zhí)行。在2302處，可將共同控制信號(hào)提供到多個(gè)圖像傳感器。所述多個(gè)圖像傳感器中的每一者可響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。舉例來(lái)說(shuō)，可通過(guò)耦合到所述多個(gè)圖像傳感器中的每一者的傳感器同步器(例如，圖2的傳感器同步器230)來(lái)提供所述共同控制信號(hào)。為了說(shuō)明，所述傳感器同步器可經(jīng)由以下接口來(lái)耦合到所述多個(gè)圖像傳感器中的每一者集成電路間(I2C)控制接口 ；順應(yīng)相機(jī)串行接口(CSI)規(guī)范的接口 ；或順應(yīng)相機(jī)并行接口(CPI)規(guī)范的接口。在2304處，可接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出?？蓮乃龆鄠€(gè)圖像傳感器中的第一圖像傳感器接收第一數(shù)據(jù)線，且可從所述多個(gè)圖像傳感器中的第二圖像傳感器接收第二數(shù)據(jù)線?？稍谕瓿山邮盏诙?shù)據(jù)線之前完成接收第一數(shù)據(jù)線，且可在完成接收第二數(shù)據(jù)線之后產(chǎn)生同步數(shù)據(jù)線，例如在圖8中在已接收第二傳感器第一線數(shù)據(jù)812之后所產(chǎn)生的經(jīng)組合數(shù)據(jù)線822。在2306處，可組合來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出以產(chǎn)生同步數(shù)據(jù)線。舉例來(lái)說(shuō)，圖2的組合器206可在逐線基礎(chǔ)上交錯(cuò)從第一圖像傳感器202接收的第一數(shù)據(jù)流與從第二圖像傳感器204接收的第二數(shù)據(jù)流。在2308處，可經(jīng)由圖像處理器的單一相機(jī)輸入將所述同步數(shù)據(jù)線提供到圖像處理器。所述同步數(shù)據(jù)線可形成具有多個(gè)行的幀(例如，圖6的幀660)的部分。舉例來(lái)說(shuō)，所述幀可包括包括來(lái)自第一圖像傳感器的第一圖像數(shù)據(jù)的第一區(qū)段、包括來(lái)自第二圖像傳感器的第二圖像數(shù)據(jù)的第二區(qū)段，和第一區(qū)段與第二區(qū)段之間的間隙區(qū)段。參看圖24，描繪將共同控制信號(hào)提供到多個(gè)圖像傳感器且接收來(lái)自所述多個(gè)圖像 傳感器中的每一者的同步數(shù)據(jù)輸出的方法的特定說(shuō)明性實(shí)施例的流程圖，且將其大體上標(biāo)示為2400。在2402處，可將共同控制信號(hào)提供到多個(gè)圖像傳感器。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。舉例來(lái)說(shuō)，可通過(guò)耦合到所述多個(gè)圖像傳感器中的每一者的傳感器同步器來(lái)提供所述共同控制信號(hào)，傳感器同步器例如為圖2到5的傳感器同步器230、圖18的控制同步塊1844、圖19的控制同步塊1936或其任何組合。在2404處，可接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出。所述同步數(shù)據(jù)輸出可包括從第一圖像傳感器接收的第一數(shù)據(jù)線和從第二圖像傳感器接收的第二數(shù)據(jù)線。作為說(shuō)明性非限制實(shí)例，來(lái)自第一圖像傳感器的每一所接收數(shù)據(jù)線與來(lái)自第二圖像傳感器的每一對(duì)應(yīng)數(shù)據(jù)線之間的相位偏移可為實(shí)質(zhì)上恒定的，例如圖9的一線相位差、圖8的二線相位差或圖12的3線相位差。參看圖25，描繪在多個(gè)圖像傳感器處接收共同控制信號(hào)且產(chǎn)生來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出的方法的特定說(shuō)明性實(shí)施例的流程圖，且將其大體上標(biāo)示為2500。在2502處，可在多個(gè)圖像傳感器處接收共同控制信號(hào)。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。舉例來(lái)說(shuō)，可從耦合到所述多個(gè)圖像傳感器中的每一者的傳感器同步器接收所述共同控制信號(hào)，傳感器同步器例如為圖2到5的傳感器同步器230、圖18的控制同步塊1844、圖19的控制同步塊1936或其任何組合。在2504處，可產(chǎn)生來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出。所述同步數(shù)據(jù)輸出可包括從第一圖像傳感器接收的第一數(shù)據(jù)線和從第二圖像傳感器接收的第二數(shù)據(jù)線。作為說(shuō)明性非限制實(shí)例，來(lái)自第一圖像傳感器的每一所接收數(shù)據(jù)線與來(lái)自第二圖像傳感器的每一對(duì)應(yīng)數(shù)據(jù)線之間的相位偏移可為實(shí)質(zhì)上恒定的，例如圖9的一線相位差、圖8的二線相位差或圖12的3線相位差。參看圖26，描繪在具有用于單一相機(jī)的輸入的圖像信號(hào)處理器處組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的方法的特定說(shuō)明性實(shí)施例的流程圖，且將其大體上標(biāo)示為2600。在2602處，可在具有用于單一相機(jī)的輸入的圖像處理器處接收?qǐng)D像數(shù)據(jù)的線。所述圖像數(shù)據(jù)的每一線可包括來(lái)自由第一相機(jī)俘獲的第一圖像的第一線數(shù)據(jù)和來(lái)自由第二相機(jī)俘獲的第二圖像的第二線數(shù)據(jù)。作為一說(shuō)明性非限制實(shí)例，所述圖像處理器可包括圖2到3或圖5的圖像信號(hào)處理器208、圖13的圖像處理器1308、圖18的VFE 1834到1842、圖19的VFE 1934到1942，或其任何組合?？稍谒鰣D像處理器處從耦合到第一相機(jī)且耦合到第二相機(jī)的組合器接收?qǐng)D像數(shù)據(jù)的線。可使用組合器同步來(lái)自第一相機(jī)的第一圖像數(shù)據(jù)和來(lái)自第二相機(jī)的第二圖像數(shù)據(jù)的逐線讀出，以產(chǎn)生圖像數(shù)據(jù)的每一線。舉例來(lái)說(shuō)，所述組合器可為圖2到3或圖5的組合器206、圖13的組合器1306、圖18的數(shù)據(jù)對(duì)準(zhǔn)塊1824到1832、圖19的數(shù)據(jù)對(duì)準(zhǔn)塊1924到1932，或其任何組合。在2604處，可產(chǎn)生輸出幀，所述輸出幀具有對(duì)應(yīng)于所述第一圖像的線數(shù)據(jù)的第一區(qū)段且具有對(duì)應(yīng)于所述第二圖像的線數(shù)據(jù)的第二區(qū)段。所述第一區(qū)段和所述第二區(qū)段可經(jīng)配置以用于產(chǎn)生三維(3D)圖像格式或3D視頻格式。
在一特定實(shí)施例中，處理所述輸出幀以產(chǎn)生3D圖像數(shù)據(jù)，且將所述3D圖像數(shù)據(jù)發(fā)送到顯示裝置。在另一實(shí)施例中，處理所述輸出幀以產(chǎn)生3D視頻數(shù)據(jù)，且將所述3D視頻數(shù)據(jù)發(fā)送到顯示裝置，例如圖13的顯示裝置1310。為了說(shuō)明，所述顯示裝置可為通信裝置、相機(jī)、個(gè)人數(shù)字助理和計(jì)算機(jī)中的至少一者的組件。參看圖27，描繪將來(lái)自多個(gè)傳感器的數(shù)據(jù)組合成幀的方法的說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為2700。作為一說(shuō)明性實(shí)例，方法2700可由圖2的系統(tǒng)、圖5的系統(tǒng)或其任何組合執(zhí)行。在2702處，可從第一圖像傳感器(例如，圖2的第一傳感器202)接收第一數(shù)據(jù)流。第一數(shù)據(jù)流(例如，圖2的第一圖像數(shù)據(jù)流212、圖6的第一數(shù)據(jù)流602，或圖5的時(shí)序數(shù)據(jù)信號(hào)420和圖像數(shù)據(jù)信號(hào)422)可對(duì)應(yīng)于圖像的第一圖像數(shù)據(jù)。在2704處，可從第二圖像傳感器(例如，圖2的第二傳感器204)接收第二數(shù)據(jù)流。第二數(shù)據(jù)流(例如，圖2的第二圖像數(shù)據(jù)流214、圖6的第二數(shù)據(jù)流604，或圖5的時(shí)序信號(hào)數(shù)據(jù)430和圖像數(shù)據(jù)信號(hào)432)可對(duì)應(yīng)于圖像的第二圖像數(shù)據(jù)。在2706處，可組合來(lái)自第一數(shù)據(jù)流的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)。舉例來(lái)說(shuō)，組合器(例如，圖2的組合器206或圖5的組合器206)可組合來(lái)自第一數(shù)據(jù)流的第一圖像數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的第二圖像數(shù)據(jù)且產(chǎn)生所得幀。為了說(shuō)明，第一數(shù)據(jù)流可包括與第一圖像數(shù)據(jù)的第一線相關(guān)聯(lián)的數(shù)據(jù)，包括具有第一線索引值的線數(shù)據(jù)、具有第二線索引值的線數(shù)據(jù)等等。第二數(shù)據(jù)流可包括對(duì)應(yīng)于第一數(shù)據(jù)流的線數(shù)據(jù)的線數(shù)據(jù)，包括具有第一線索引值的對(duì)應(yīng)線數(shù)據(jù)和具有第二線索引值的對(duì)應(yīng)線數(shù)據(jù)等等。來(lái)自第一數(shù)據(jù)流的具有第一線索引值的線數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的具有對(duì)應(yīng)第一線索引值的線數(shù)據(jù)可彼此附加或組合以形成單一圖像線。所述過(guò)程可針對(duì)每一線索引值重復(fù)以產(chǎn)生所得幀(例如，圖6的幀660)。在一特定實(shí)施例中，所述幀可包括多個(gè)行，其中每一行對(duì)應(yīng)于一線索引值，且存儲(chǔ)第一圖像數(shù)據(jù)的具有所述線索引值的線，且存儲(chǔ)第二圖像數(shù)據(jù)的具有所述線索引值的對(duì)應(yīng)線。在一特定實(shí)施例中，當(dāng)?shù)谝粓D像數(shù)據(jù)的第一線與第二圖像數(shù)據(jù)的對(duì)應(yīng)線組合成單一圖像線時(shí)，所述單一圖像線的大小為第一圖像數(shù)據(jù)的第一線或第二圖像數(shù)據(jù)的對(duì)應(yīng)線的大小的實(shí)質(zhì)上兩倍。在2708處，可在圖像信號(hào)處理器處處理所述幀以產(chǎn)生經(jīng)處理幀。在一特定實(shí)施例中，所述圖像信號(hào)處理器可為圖2的圖像信號(hào)處理器208或圖5的圖像信號(hào)處理器208，且所述經(jīng)處理幀可為圖2的經(jīng)處理幀240或圖6的經(jīng)處理幀650。在一特定實(shí)施例中，所述經(jīng)處理幀可包括包括來(lái)自第一圖像傳感器的第一圖像數(shù)據(jù)的第一區(qū)段(例如，第一區(qū)段652)、包括來(lái)自第二圖像傳感器的第二圖像數(shù)據(jù)的第二區(qū)段(例如，第二區(qū)段654)，和間隙區(qū)段(例如，圖6的間隙區(qū)段656)。所述間隙區(qū)段可包括安置于第一區(qū)段與第二區(qū)段之間的非圖像數(shù)據(jù)。在一特定實(shí)施例中，所述第一區(qū)段可包括第一圖像數(shù)據(jù)的線，且所述第二區(qū)段可包括第二圖像數(shù)據(jù)的對(duì)應(yīng)線。在2710處，可輸出所述經(jīng)處理幀以在顯示裝置處顯示。在一特定實(shí)施例中，所述第一圖像傳感器和所述第二圖像傳感器各自直接響應(yīng)于所述圖像信號(hào)處理器，且所述顯示裝置可與所述圖像信號(hào)處理器解耦。參看圖28，描繪同步第一圖像傳感器與第二圖像傳感器的方法的說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為2800。作為一說(shuō)明性實(shí)例，方法2800可在圖2的系統(tǒng)200、圖5的系統(tǒng)600或其任何組合處執(zhí)行。在2802處，可從第一圖像傳感器接收?qǐng)D像的第一圖像數(shù)據(jù)。在一特定實(shí)施例中，第一圖像傳感器可為圖2的第一傳感器202。在2804處，可從第一圖像傳感器接收與第一 圖像數(shù)據(jù)相關(guān)聯(lián)的第一數(shù)據(jù)流。在一特定實(shí)施例中，第一數(shù)據(jù)流可由圖像傳感器產(chǎn)生，且可為圖2的第一圖像數(shù)據(jù)流212、圖6的第一數(shù)據(jù)流602，或圖5的時(shí)序數(shù)據(jù)信號(hào)420和圖像數(shù)據(jù)信號(hào)422。在2806處，可從第二圖像傳感器接收所述圖像的第二圖像數(shù)據(jù)。在一特定實(shí)施例中，第二圖像傳感器可為圖2的第二傳感器204。在2808處，可從第二圖像傳感器接收與第二圖像數(shù)據(jù)相關(guān)聯(lián)的第二數(shù)據(jù)流。在一特定實(shí)施例中，第二數(shù)據(jù)流可由圖像傳感器產(chǎn)生，且可為圖2的第二圖像數(shù)據(jù)流214、圖6的第二數(shù)據(jù)流604，或圖5的時(shí)序數(shù)據(jù)信號(hào)430和圖像數(shù)據(jù)信號(hào)432。在2810處，可同步在圖像數(shù)據(jù)采集期間所述第一圖像傳感器和所述第二圖像傳感器的逐線曝光。在一特定實(shí)施例中，所述同步可在包括組合器(例如，圖2的組合器206或圖5的組合器206)的主機(jī)處的對(duì)圖像的圖像數(shù)據(jù)采集期間發(fā)生。在一特定實(shí)施例中，所述第一圖像傳感器與所述第二圖像傳感器彼此獨(dú)立。舉例來(lái)說(shuō)，圖2的第一傳感器202和第二傳感器204經(jīng)由控制信號(hào)232直接響應(yīng)于圖像信號(hào)處理器208，以在保持彼此獨(dú)立的同時(shí)具有類似時(shí)序特性。在2812處，可交錯(cuò)第一數(shù)據(jù)流與第二數(shù)據(jù)流。在一特定實(shí)施例中，所述第一數(shù)據(jù)流與所述第二數(shù)據(jù)流可在逐線基礎(chǔ)上交錯(cuò)。舉例來(lái)說(shuō)，來(lái)自第一數(shù)據(jù)流的具有第一線索引值的線數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的具有對(duì)應(yīng)第一線索引值的線數(shù)據(jù)可彼此附加以形成經(jīng)交錯(cuò)的單一圖像線。因此，可使用單一圖像信號(hào)處理器有效地處理經(jīng)組合數(shù)據(jù)。因此，與向每一傳感器指派一處理器的多處理器系統(tǒng)相比，總的圖像系統(tǒng)成本和復(fù)雜性可減小。參看圖29，描繪組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)以產(chǎn)生3D圖像數(shù)據(jù)的方法的第一說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為2900。作為一說(shuō)明性實(shí)例，方法2900可由圖13的系統(tǒng)執(zhí)行。所述方法包括在2902處，同步來(lái)自第一相機(jī)和第二相機(jī)的第一圖像數(shù)據(jù)的逐線讀出以產(chǎn)生圖像數(shù)據(jù)的多個(gè)行。來(lái)自第一相機(jī)的第一圖像數(shù)據(jù)可為來(lái)自圖I的第一圖像傳感器1302的圖像數(shù)據(jù)流1314，且第二圖像數(shù)據(jù)可為來(lái)自圖13的第二圖像傳感器1304的圖像數(shù)據(jù)流1316。所述方法包括在2904處，在具有用于單一相機(jī)的輸入的圖像處理器處接收?qǐng)D像數(shù)據(jù)的多個(gè)行。所述圖像數(shù)據(jù)的每一行包括來(lái)自由第一相機(jī)俘獲的第一圖像的一行的數(shù)據(jù)和來(lái)自由第二相機(jī)俘獲的第二圖像的一行的數(shù)據(jù)。圖像數(shù)據(jù)的行可為圖7中所描繪的數(shù)據(jù)輸出流706。所述方法包括在2906處，使用圖像處理器產(chǎn)生具有3D圖像格式和3D視頻格式中的一者的輸出。所述輸出對(duì)應(yīng)于所述第一圖像和所述第二圖像。在2908處，將所述輸出發(fā)送到顯示裝置(例如，圖13的顯示裝置1310)。參看圖30，描繪將來(lái)自多個(gè)傳感器的數(shù)據(jù)組合成幀的方法的說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為3000。作為一說(shuō)明性實(shí)例，方法3000可由圖13的系統(tǒng)執(zhí)行。
在3002處，從第一圖像傳感器(例如，圖13的第一圖像傳感器1302)接收第一數(shù)據(jù)流。第一數(shù)據(jù)流(例如，圖13的第一圖像數(shù)據(jù)流1314或圖7的第一數(shù)據(jù)流702)可對(duì)應(yīng)于第一圖像的第一圖像數(shù)據(jù)。在3004處，可從第二圖像傳感器(例如，圖13的第二圖像傳感器1304)接收第二數(shù)據(jù)流。第二數(shù)據(jù)流(例如，圖13的第二圖像數(shù)據(jù)流1316、圖7的第二數(shù)據(jù)流704)可對(duì)應(yīng)于第二圖像的第二圖像數(shù)據(jù)。所述第一圖像和所述第二圖像可為場(chǎng)景的圖像。所述場(chǎng)景的第一圖像和第二圖像可在實(shí)質(zhì)上相同時(shí)間拍攝或可在不同時(shí)間拍攝?？蓮呐c第二圖像不同的有利位置拍攝第一圖像，使得可從所述場(chǎng)景的第一圖像和第二圖像確定深度信息。在3006處，組合來(lái)自第一數(shù)據(jù)流的數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)。舉例來(lái)說(shuō)，組合器(例如，圖13的組合器1306)可組合來(lái)自第一數(shù)據(jù)流的第一圖像數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的第二圖像數(shù)據(jù)且產(chǎn)生所得幀。為了說(shuō)明，第一數(shù)據(jù)流可包括與第一圖像數(shù)據(jù)的第一線相關(guān)聯(lián)的數(shù)據(jù)，包括具有第一線索引值的線數(shù)據(jù)、具有第二線索引值的線數(shù)據(jù)等等。第二數(shù)據(jù)流可包括對(duì)應(yīng)于第一數(shù)據(jù)流的線數(shù)據(jù)的線數(shù)據(jù)，包括具有第一線索引值的對(duì)應(yīng)線數(shù)據(jù)和具有第二線索引值的對(duì)應(yīng)線數(shù)據(jù)等等。來(lái)自第一數(shù)據(jù)流的具有第一線索引值的線數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的具有對(duì)應(yīng)第一線索引值的線數(shù)據(jù)可彼此附加或組合以形成單一圖像線。所述過(guò)程可針對(duì)每一線索引值重復(fù)以產(chǎn)生所得幀(例如，圖7的幀740)。在一特定實(shí)施例中，所述幀可包括多個(gè)行，其中每一行對(duì)應(yīng)于一線索引值，且存儲(chǔ)第一圖像數(shù)據(jù)的具有所述線索引值的線，且存儲(chǔ)第二圖像數(shù)據(jù)的具有所述線索引值的對(duì)應(yīng)線。在一特定實(shí)施例中，當(dāng)?shù)谝粓D像數(shù)據(jù)的第一線與第二圖像數(shù)據(jù)的對(duì)應(yīng)線組合成單一圖像線時(shí)，所述單一圖像線的大小為第一圖像數(shù)據(jù)的第一線或第二圖像數(shù)據(jù)的對(duì)應(yīng)線的大小的實(shí)質(zhì)上兩倍。在3008處，經(jīng)由用于單一相機(jī)的輸入來(lái)接收幀以作為圖像數(shù)據(jù)的多個(gè)行。在一特定實(shí)施例中，用于單一相機(jī)的輸入可為圖像處理器(例如，圖13的圖像處理器1308)的輸入。所述幀可為圖7的幀740。在3010處，從所述幀產(chǎn)生輸出。所述輸出具有3D圖像格式和3D視頻格式中的一者。所述輸出對(duì)應(yīng)于所述第一圖像和所述第二圖像。所述輸出可為圖13的經(jīng)處理的幀數(shù)據(jù)1320。在3012處，將所述輸出發(fā)送到顯示裝置。在一特定實(shí)施例中，所述顯示裝置可為圖13的顯示裝置1310。參看圖31，描繪同步第一圖像傳感器與第二圖像傳感器的方法的說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為3100。作為一說(shuō)明性實(shí)例，方法3100可由圖13的系統(tǒng)1300執(zhí)行。在3102處，可從第一圖像傳感器接收?qǐng)D像的第一圖像數(shù)據(jù)。在一特定實(shí)施例中，第一圖像傳感器可為圖13的第一圖像傳感器1302。在3104處，可從第一圖像傳感器接收與第一圖像數(shù)據(jù)相關(guān)聯(lián)的第一數(shù)據(jù)流。在一特定實(shí)施例中，第一數(shù)據(jù)流可由所述圖像傳感器產(chǎn)生，且可為圖13的第一圖像數(shù)據(jù)流1314或圖7的第一數(shù)據(jù)流702。在3106處，可從第二圖像傳感器接收所述圖像的第二圖像數(shù)據(jù)。在一特定實(shí)施例中，第二圖像傳感器可為圖13的第二圖像傳感器1304。在3108處，可從第二圖像傳感器接收與第二圖像數(shù)據(jù)相關(guān)聯(lián)的第二數(shù)據(jù)流。在一特定實(shí)施例中，第二數(shù)據(jù)流可由所述圖像傳感器產(chǎn)生，且可為圖13的第二圖像數(shù)據(jù)流1316或圖7的第二數(shù)據(jù)流704。在3110處，可同步在圖像數(shù)據(jù)采集期間所述第一圖像傳感器和所述第二圖像傳感器的逐線曝光。在一特定實(shí)施例中，所述同步可在包括組合器(例如，圖13的組合器1306)的主機(jī)處的對(duì)圖像的圖像數(shù)據(jù)采集期間發(fā)生。在一特定實(shí)施例中，所述第一圖像傳感 器與所述第二圖像傳感器彼此獨(dú)立。舉例來(lái)說(shuō)，圖13的第一圖像傳感器1302和第二圖像傳感器1304可經(jīng)由控制信號(hào)直接響應(yīng)于圖像處理器1308，以在保持彼此獨(dú)立的同時(shí)具有類似時(shí)序特性。在另一實(shí)施例中，第一圖像傳感器1302和第二圖像傳感器1304經(jīng)由控制信號(hào)直接響應(yīng)于組合器1306，以在保持彼此獨(dú)立的同時(shí)具有類似時(shí)序特性。在3112處，可交錯(cuò)第一數(shù)據(jù)流與第二數(shù)據(jù)流。在一特定實(shí)施例中，所述第一數(shù)據(jù)流與所述第二數(shù)據(jù)流可在逐線基礎(chǔ)上交錯(cuò)。舉例來(lái)說(shuō)，來(lái)自第一數(shù)據(jù)流的具有第一線索引值的線數(shù)據(jù)與來(lái)自第二數(shù)據(jù)流的具有對(duì)應(yīng)第一線索引值的線數(shù)據(jù)可彼此附加以形成經(jīng)交錯(cuò)的單一圖像線。因此，可使用單一圖像處理器有效地處理經(jīng)組合數(shù)據(jù)。因此，與向每一傳感器指派一處理器的多處理器系統(tǒng)相比，總的圖像系統(tǒng)成本和復(fù)雜性可減小。參看圖32，描繪使用圖像處理器產(chǎn)生3D圖像的方法的說(shuō)明性實(shí)施例的流程圖且將其大體上標(biāo)示為3200。所述圖像處理器可為圖13的圖像處理器1308。當(dāng)圖像處理器處理從組合器(例如，圖I的組合器1306)接收的幀、來(lái)自存儲(chǔ)器的幀，或當(dāng)用戶選擇使用顯示3D圖像的裝置的變焦特征或搖攝特征來(lái)更改所顯示的3D圖像時(shí)，可使用方法3200。在3202處，圖像處理器基于校準(zhǔn)矩陣的參數(shù)修整第一圖像和第二圖像。所述校準(zhǔn)矩陣可提供用于俘獲第一圖像和第二圖像的第一圖像傳感器和第二圖像傳感器的相對(duì)位置的調(diào)整。兩個(gè)相機(jī)的相對(duì)位置可經(jīng)選擇以確保最小場(chǎng)景失真和眼疲勞。可在于第一圖像傳感器和第二圖像傳感器的位置相對(duì)于彼此固定的情況下拍攝3D圖像的裝置的制造過(guò)程期間確定所述校準(zhǔn)矩陣。所述校準(zhǔn)可存儲(chǔ)于所述裝置的存儲(chǔ)器中。對(duì)于在第一圖像傳感器、第二圖像傳感器或兩者的位置可調(diào)整的情況下拍攝3D圖像的裝置，所述裝置的處理器可用于執(zhí)行校準(zhǔn)例程以確定所述校準(zhǔn)矩陣且將所述校準(zhǔn)矩陣存儲(chǔ)于存儲(chǔ)器中。所述校準(zhǔn)例程可能需要第一圖像傳感器和第二圖像傳感器聚焦于經(jīng)定位成距所述圖像傳感器一設(shè)定距離的特定校準(zhǔn)場(chǎng)景上?？稍谒鰣D像傳感器相對(duì)于彼此的位置調(diào)整之后執(zhí)行所述校準(zhǔn)例程。在3204處，圖像處理器檢測(cè)第一圖像中的關(guān)鍵點(diǎn)。所述圖像處理器可檢測(cè)第一圖像中的獨(dú)特(高頻率)點(diǎn)。在3206處，圖像處理器在第一圖像和第二圖像中的局域圖像小塊(image patch)之間進(jìn)行塊匹配，以計(jì)算第一圖像中的每一經(jīng)檢測(cè)關(guān)鍵點(diǎn)的差異。可制造用于每一關(guān)鍵點(diǎn)的可靠性估計(jì)器以保證舍棄錯(cuò)誤的匹配。在3208處，所述圖像處理器基于從所計(jì)算的差異所確定的差異范圍來(lái)確定會(huì)聚調(diào)整。所述會(huì)聚調(diào)整考慮到場(chǎng)景深度和顯示器幾何形狀。在3210處，當(dāng)會(huì)聚調(diào)整在將顯示3D圖像以產(chǎn)生輸出的顯示裝置的能力內(nèi)時(shí)，所述圖像處理器基于所述會(huì)聚調(diào)整而選擇性地移位第一圖像和第二圖像中的至少一者。在3212處，當(dāng)會(huì)聚調(diào)整不在用以產(chǎn)生輸出的顯示裝置的能力內(nèi)時(shí)，所述圖像處理器使用具有經(jīng)調(diào)整以匹配大多數(shù)場(chǎng)景的差異的第一圖像。在3214處，所述圖像處理器基于顯示裝置的一個(gè)或一個(gè)以上顯示特性來(lái)修剪所述輸出。圖33為用以組合來(lái)自多個(gè)圖像傳感器的數(shù)據(jù)的圖像處理系統(tǒng)3300的特定實(shí)施例的方框圖。圖像處理系統(tǒng)3300可包括圖像傳感器裝置3302，圖像傳感器裝置3302耦合到第一透鏡3304，耦合到第二透鏡3306，且耦合到便攜式多媒體裝置的應(yīng)用處理器芯片組3308。圖像傳感器裝置3302可包括組合器3310和接收用于單一相機(jī)的輸入的圖像處理器3312。圖像處理器3312可接收來(lái)自組合器3310或來(lái)自便攜式多媒體裝置的應(yīng)用處理器芯 片組3308的存儲(chǔ)器裝置3314的單一相機(jī)輸入。組合器3310可(例如)通過(guò)實(shí)施圖13的系統(tǒng)1300，通過(guò)根據(jù)圖29到31的實(shí)施例中的任一者操作或其任何組合來(lái)組合來(lái)自第一數(shù)據(jù)流和來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)以產(chǎn)生幀。組合器3310經(jīng)耦合以經(jīng)由第一模/數(shù)轉(zhuǎn)換器3318接收來(lái)自第一傳感器3316的圖像數(shù)據(jù)。組合器3310經(jīng)耦合以經(jīng)由第二模/數(shù)轉(zhuǎn)換器3322接收來(lái)自第二傳感器3320的圖像數(shù)據(jù)。組合器3310或圖像處理器3312可控制第一傳感器3316和第二傳感器3320，第一傳感器3316與第二傳感器3320可以其它方式彼此獨(dú)立。在一特定實(shí)施例中，圖像處理器3312可經(jīng)由傳感器同步器3330(以陰影展示)控制第一傳感器3316和第二傳感器3320。在一特定實(shí)施例中，包括圖像處理電路(例如，組合器3310)的集成電路經(jīng)配置以產(chǎn)生幀。所述圖像處理電路經(jīng)配置以接收來(lái)自第一圖像傳感器(例如，第一傳感器3316)的第一數(shù)據(jù)流，接收來(lái)自第二圖像傳感器(例如，第二傳感器3320)的第二數(shù)據(jù)流，且組合來(lái)自第一數(shù)據(jù)流和來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)以產(chǎn)生所述幀。舉例來(lái)說(shuō)，圖7的第一數(shù)據(jù)流702與第二數(shù)據(jù)流704可通過(guò)組合器3310進(jìn)行組合以形成圖7的幀740?？蓪?lái)自組合器3310的輸出發(fā)送到便攜式多媒體裝置的應(yīng)用處理器芯片組3308的存儲(chǔ)器裝置3314，發(fā)送到圖像處理器3312或兩者。圖像處理器3312可經(jīng)配置以執(zhí)行額外圖像處理操作，例如由圖像處理系統(tǒng)執(zhí)行的一個(gè)或一個(gè)以上操作。圖像處理器3312可接收來(lái)自組合器3310或來(lái)自存儲(chǔ)器裝置3314的幀。圖像處理器3312可產(chǎn)生經(jīng)處理的圖像數(shù)據(jù)，例如具有3D圖像格式或3D視頻格式的經(jīng)處理幀。在一實(shí)施例中，用于產(chǎn)生經(jīng)處理的圖像數(shù)據(jù)的平均時(shí)間為約20毫秒。圖像處理器3312可將經(jīng)處理的圖像數(shù)據(jù)提供到便攜式多媒體裝置的應(yīng)用處理器芯片組3308以用于進(jìn)一步處理、傳輸、存儲(chǔ)、顯示到顯示裝置3324，或其任何組合。參看圖34，描繪包括如本文中所描述的幀產(chǎn)生器模塊的電子裝置(例如，無(wú)線電話)的特定說(shuō)明性實(shí)施例的方框圖且將其大體上標(biāo)示為3400。裝置3400包括耦合到存儲(chǔ)器3432的處理器3410。所述處理器包括或耦合到控制器3464?；蛘撸鲭娮友b置可為機(jī)頂盒、音樂(lè)播放器、視頻播放器、娛樂(lè)單元、導(dǎo)航裝置、通信裝置、個(gè)人數(shù)字助理(PDA)、相機(jī)、固定位置數(shù)據(jù)單元或計(jì)算機(jī)。圖34還展示耦合到處理器3410且耦合到顯示器3428的顯示器控制器3426。編碼器/解碼器(CODEC) 3434也可耦合到處理器3410。揚(yáng)聲器3439和麥克風(fēng)3438可耦合到CODEC 3434。相機(jī)控制器3470也可耦合到處理器3410。第一相機(jī)3472和第二相機(jī)3473可耦合到相機(jī)控制器3470。圖34還指示無(wú)線接口 3440可耦合到處理器3410且耦合到無(wú)線天線3442。在一特定實(shí)施例中，處理器3410、顯示器控制器3426、存儲(chǔ)器3432、CODEC 3434、無(wú)線接口 3440和控制器3464包括于系統(tǒng)級(jí)封裝或系統(tǒng)芯片3422中。在一特定實(shí)施例中，輸入裝置3430和電力供應(yīng)器3444耦合到系統(tǒng)芯片3422。此外，在一特定實(shí)施例中，如圖34中所說(shuō)明，顯示器3428、輸入裝置3430、揚(yáng)聲器3439、麥克風(fēng)3438、無(wú)線天線3442和電力供應(yīng)器3444在系統(tǒng)芯片3422外部。然而，每一者可耦合到系統(tǒng)芯片3422的組件，例如接口或控制器。在一特定實(shí)施例中，處理器3410執(zhí)行來(lái)自處理器可讀媒體的處理器可讀程序指令，例如存儲(chǔ)于存儲(chǔ)器3432處的程序指令3482。舉例來(lái)說(shuō)，存儲(chǔ)器3432可由處理器3410讀取，且指令3482可為可由處理器3410執(zhí)行以執(zhí)行圖22的方法2200的操作指令。舉例來(lái)說(shuō)，指令3482可包括可由處理器3410執(zhí)行以執(zhí)行以下操作的指令接收來(lái)自第一圖像傳感器(例如，相機(jī)3473)的第一數(shù)據(jù)流，接收來(lái)自第二圖像傳感器(例如，相機(jī)3472)的第 二數(shù)據(jù)流，且組合來(lái)自第一數(shù)據(jù)流和來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)以產(chǎn)生幀。舉例來(lái)說(shuō)，所述第一圖像傳感器可為圖2的第一傳感器202且所述第二圖像傳感器可為圖2的第二傳感器204。指令3482可進(jìn)一步包括可由處理器3410執(zhí)行以在處理器3410處或在圖像信號(hào)處理器(未圖示)處處理所述幀以產(chǎn)生經(jīng)處理幀的指令。指令3482可進(jìn)一步包括可由處理器3410執(zhí)行以輸出待在顯示裝置3428處顯示或作為圖像數(shù)據(jù)3480存儲(chǔ)于存儲(chǔ)器3432處的經(jīng)處理幀的指令。參看圖35，描繪電子裝置(例如，移動(dòng)電話)的特定說(shuō)明性實(shí)施例的方框圖且將其大體上標(biāo)示為3500。裝置3500包括耦合到存儲(chǔ)器3504的處理器3502。處理器3502包括或耦合到圖像處理器3506。圖像處理器3506可接收單一相機(jī)輸入且可輸出3D數(shù)據(jù)3590。3D數(shù)據(jù)3590可呈3D圖像格式或3D視頻格式?；蛘?，電子裝置3500可為機(jī)頂盒、音樂(lè)播放器、視頻播放器、娛樂(lè)單元、導(dǎo)航裝置、通信裝置、個(gè)人數(shù)字助理(PDA)、相機(jī)、固定位置數(shù)據(jù)單元、計(jì)算機(jī)或其組合。圖35還展示耦合到處理器3502且耦合到顯示器3510的顯示器控制器3508。編碼器/解碼器(CODEC) 3512也可耦合到處理器3502。揚(yáng)聲器3514和麥克風(fēng)3516可耦合到CODEC 3512。相機(jī)控制器3518也可耦合到處理器3502。相機(jī)控制器3518可包括組合器3520。組合器3520可將圖像數(shù)據(jù)提供到圖像處理器3506。作為說(shuō)明性實(shí)例，組合器3520可為圖13的組合器1306，或經(jīng)配置以組合來(lái)自多個(gè)相機(jī)的數(shù)據(jù)的其它硬件電路或處理器，如關(guān)于圖7所說(shuō)明。第一相機(jī)3522和第二相機(jī)3524可耦合到相機(jī)控制器3518。圖35還指示無(wú)線接口 3526可耦合到處理器3502且耦合到無(wú)線天線3528。在一特定實(shí)施例中，處理器3502、顯示器控制器3508、存儲(chǔ)器3504、CODEC 3512、相機(jī)控制器3518和無(wú)線接口 3526包括于系統(tǒng)級(jí)封裝或系統(tǒng)芯片3530中。在一特定實(shí)施例中，輸入裝置3532和電力供應(yīng)器3534耦合到系統(tǒng)芯片3530。此外，在一特定實(shí)施例中，如圖35中所說(shuō)明，顯示器3510、輸入裝置3532、揚(yáng)聲器3514、麥克風(fēng)3516、無(wú)線天線3528和電力供應(yīng)器3534在系統(tǒng)芯片3530外部。然而，每一者可耦合到系統(tǒng)芯片3530的組件，例如接口或控制器。
在一特定實(shí)施例中，處理器3502執(zhí)行來(lái)自處理器可讀媒體的處理器可讀程序指令，例如存儲(chǔ)于存儲(chǔ)器3504處的程序指令3536。舉例來(lái)說(shuō)，存儲(chǔ)器3504可由處理器3502讀取，且指令3536可為可由處理器3502執(zhí)行以執(zhí)行圖25的方法2500的操作指令。舉例來(lái)說(shuō)，指令3536可包括可由處理器3502執(zhí)行以執(zhí)行以下操作的指令接收來(lái)自第一圖像傳感器(例如，相機(jī)3522)的第一數(shù)據(jù)流，接收來(lái)自第二圖像傳感器(例如，相機(jī)3524)的第二數(shù)據(jù)流，且使用相機(jī)控制器3518的組合器3520組合來(lái)自第一數(shù)據(jù)流和來(lái)自第二數(shù)據(jù)流的數(shù)據(jù)以產(chǎn)生幀。舉例來(lái)說(shuō)，所述第一圖像傳感器可為圖13的第一圖像傳感器1302，且所述第二圖像傳感器可為圖13的第二圖像傳感器1304。指令3536可進(jìn)一步包括可由處理器3502執(zhí)行以在圖像處理器3506處處理所述幀以產(chǎn)生經(jīng)處理幀的指令。指令3536可進(jìn)一步包括可由處理器3502執(zhí)行以將經(jīng)處理幀作為3D數(shù)據(jù)輸出到顯示器控制器3508以用于在顯示裝置3510處顯示或?qū)⒔?jīng)處理幀作為圖像數(shù)據(jù)3538存儲(chǔ)于存儲(chǔ)器3504處的指令。所屬領(lǐng)域的技術(shù)人員應(yīng)進(jìn)一步了解，可將結(jié)合本文中所揭示的實(shí)施例而描述的各種說(shuō)明性邏輯塊、配置、模塊、電路和算法步驟實(shí)施為電子硬件、由處理器執(zhí)行的計(jì)算機(jī)軟件，或兩者的組合。已在上文大體上就其功能性描述了各種說(shuō)明性組件、塊、配置、模塊、電路和步驟。將此功能性實(shí)施為硬件還是由處理器執(zhí)行的軟件取決于特定應(yīng)用和強(qiáng)加于整個(gè) 系統(tǒng)的設(shè)計(jì)約束。所屬領(lǐng)域的技術(shù)人員可針對(duì)每一特定應(yīng)用以不同方式實(shí)施所描述的功能性，但不應(yīng)將此些實(shí)施方案決策解釋為導(dǎo)致脫離本發(fā)明的范圍?？赏ㄟ^(guò)執(zhí)行可以計(jì)算機(jī)可讀指令的形式存儲(chǔ)于存儲(chǔ)器中的程序代碼來(lái)執(zhí)行圖22到32的方法。在所述狀況下，處理器(例如，數(shù)字信號(hào)處理器(DSP)、圖像信號(hào)處理器(ISP)或其它處理器)可執(zhí)行存儲(chǔ)于存儲(chǔ)器中的指令，以便執(zhí)行所述圖像處理方法中的一者或一者以上。在一些狀況下，所述方法可由調(diào)用各種硬件組件以加速圖像處理的DSP或ISP來(lái)執(zhí)行。在其它狀況下，本文中所描述的單元可實(shí)施為微處理器、一個(gè)或一個(gè)以上專用集成電路(ASIC)、一個(gè)或一個(gè)以上現(xiàn)場(chǎng)可編程門(mén)陣列(FPGA)或其任何組合，或方法可由微處理器、一個(gè)或一個(gè)以上專用集成電路(ASIC)、一個(gè)或一個(gè)以上場(chǎng)可編程門(mén)陣列(FPGA)或其任何組合來(lái)執(zhí)行。結(jié)合本文中所揭示的實(shí)施例而描述的方法或算法的步驟可直接體現(xiàn)于硬件中、由處理器執(zhí)行的軟件模塊中，或所述兩者的組合中。軟件模塊可駐留于隨機(jī)存取存儲(chǔ)器(RAM)、快閃存儲(chǔ)器、只讀存儲(chǔ)器(ROM)、可編程只讀存儲(chǔ)器(PROM)、可擦除可編程只讀存儲(chǔ)器(EPROM)、電可擦除可編程只讀存儲(chǔ)器(EEPROM)、寄存器、硬盤(pán)、可裝卸式磁盤(pán)、壓縮光盤(pán)只讀存儲(chǔ)器(CD-ROM)，或此項(xiàng)技術(shù)中已知的任何其它形式的非暫時(shí)性計(jì)算機(jī)可讀存儲(chǔ)媒體中。示范性存儲(chǔ)媒體耦合到處理器，使得處理器可從存儲(chǔ)媒體讀取信息和將信息寫(xiě)入到存儲(chǔ)媒體。在替代方案中，存儲(chǔ)媒體可與處理器成一體式。處理器和存儲(chǔ)媒體可駐留于專用集成電路(ASIC)中。ASIC可駐留于計(jì)算裝置或用戶終端中。在替代方案中，處理器和存儲(chǔ)媒體可作為離散組件而駐留于計(jì)算裝置或用戶終端中。提供所揭示實(shí)施例的先前描述，以使得所屬領(lǐng)域的技術(shù)人員能夠制作或使用所揭示實(shí)施例。所屬領(lǐng)域的技術(shù)人員將容易明白對(duì)這些實(shí)施例的各種修改，且本文中所界定的原理可在不脫離本發(fā)明的范圍的情況下應(yīng)用于其它實(shí)施例。因此，本發(fā)明無(wú)意限于本文中所展示的實(shí)施例，而是將賦予本發(fā)明可能與如由所附權(quán)利要求書(shū)所界定的原理和新穎特征一致的最廣范圍。
權(quán)利要求
1.一種方法，其包含 將共同控制信號(hào)提供到多個(gè)圖像傳感器，其中所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)； 接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出； 組合來(lái)自所述多個(gè)圖像傳感器中的每一者的所述同步數(shù)據(jù)輸出以產(chǎn)生同步數(shù)據(jù)線；以及 經(jīng)由圖像處理器的單一相機(jī)輸入將所述同步數(shù)據(jù)線提供到所述圖像處理器。
2.根據(jù)權(quán)利要求I所述的方法，其中所述同步數(shù)據(jù)線形成具有多個(gè)行的一幀的部分，其中每一行包括第一圖像傳感器的特定數(shù)據(jù)線和第二圖像傳感器的對(duì)應(yīng)數(shù)據(jù)線。
3.根據(jù)權(quán)利要求2所述的方法，其中所述幀包含 第一區(qū)段，其包括來(lái)自所述第一圖像傳感器的第一圖像數(shù)據(jù)；以及 第二區(qū)段，其包括來(lái)自所述第二圖像傳感器的第二圖像數(shù)據(jù)。
4.根據(jù)權(quán)利要求3所述的方法，其中所述幀進(jìn)一步包含間隙區(qū)段，所述間隙區(qū)段包含安置于所述第一區(qū)段與所述第二區(qū)段之間的非圖像數(shù)據(jù)。
5.根據(jù)權(quán)利要求I所述的方法，其進(jìn)一步包含在逐線基礎(chǔ)上交錯(cuò)從第一圖像傳感器接收的第一數(shù)據(jù)流與從第二圖像傳感器接收的第二數(shù)據(jù)流。
6.根據(jù)權(quán)利要求I所述的方法，其中接收同步數(shù)據(jù)輸出包括接收來(lái)自所述多個(gè)圖像傳感器中的第一圖像傳感器的第一數(shù)據(jù)線，且接收來(lái)自所述多個(gè)圖像傳感器中的第二圖像傳感器的第二數(shù)據(jù)線，其中在完成接收所述第二數(shù)據(jù)線之前完成接收所述第一數(shù)據(jù)線，且其中在完成接收所述第二數(shù)據(jù)線之后產(chǎn)生所述同步數(shù)據(jù)線。
7.根據(jù)權(quán)利要求6所述的方法，其進(jìn)一步包含在產(chǎn)生所述同步數(shù)據(jù)線之前緩沖從所述第一圖像傳感器接收的下一數(shù)據(jù)線的至少一部分。
8.根據(jù)權(quán)利要求I所述的方法，其中由耦合到所述多個(gè)圖像傳感器中的每一者的傳感器同步器提供所述共同控制信號(hào)。
9.根據(jù)權(quán)利要求8所述的方法，其中經(jīng)由以下接口將所述傳感器同步器耦合到所述多個(gè)圖像傳感器中的每一者集成電路間(I2C)控制接口 ；順應(yīng)相機(jī)串行接口 CSI規(guī)范的接口 ；或順應(yīng)相機(jī)并行接口 CPI規(guī)范的接口。
10.一種設(shè)備，其包含 傳感器同步器，其經(jīng)配置以將共同控制信號(hào)提供到多個(gè)圖像傳感器，其中所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)；以及 組合器，其經(jīng)配置以組合從所述多個(gè)圖像傳感器中的每一者接收的同步數(shù)據(jù)輸出，以產(chǎn)生待經(jīng)由圖像處理器的單一相機(jī)輸入提供到所述圖像處理器的同步數(shù)據(jù)線。
11.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述同步數(shù)據(jù)線形成具有多個(gè)行的一幀的部分，其中每一行包括第一圖像傳感器的特定數(shù)據(jù)線和第二圖像傳感器的對(duì)應(yīng)數(shù)據(jù)線。
12.根據(jù)權(quán)利要求11所述的設(shè)備，其中所述幀包含 第一區(qū)段，其包括來(lái)自所述第一圖像傳感器的第一圖像數(shù)據(jù)；以及 第二區(qū)段，其包括來(lái)自所述第二圖像傳感器的第二圖像數(shù)據(jù)。
13.根據(jù)權(quán)利要求12所述的設(shè)備，其中所述幀進(jìn)一步包含間隙區(qū)段，所述間隙區(qū)段包含安置于所述第一區(qū)段與所述第二區(qū)段之間的非圖像數(shù)據(jù)。
14.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述組合器經(jīng)配置以在逐線基礎(chǔ)上交錯(cuò)從所述多個(gè)圖像傳感器接收的數(shù)據(jù)流。
15.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述同步數(shù)據(jù)輸出包括所述多個(gè)圖像傳感器中的第一圖像傳感器的第一數(shù)據(jù)線和所述多個(gè)圖像傳感器中的第二圖像傳感器的第二數(shù)據(jù)線，所述第二數(shù)據(jù)線相對(duì)于所述第一數(shù)據(jù)線被延遲，且其中在所述組合器接收所述第二數(shù)據(jù)線之后在所述組合器處產(chǎn)生所述同步數(shù)據(jù)線，所述同步數(shù)據(jù)線包括所述第一數(shù)據(jù)線和所述第二數(shù)據(jù)線。
16.根據(jù)權(quán)利要求15所述的設(shè)備，其進(jìn)一步包含緩沖器，所述緩沖器經(jīng)配置以在產(chǎn)生所述同步數(shù)據(jù)線之前緩沖從所述第一圖像傳感器接收的下一數(shù)據(jù)線的至少一部分。
17.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述傳感器同步器經(jīng)由以下接口而耦合到所述多個(gè)圖像傳感器中的每一者集成電路間(I2C)控制接口 ；順應(yīng)相機(jī)串行接口 CSI規(guī)范的接口 ；或順應(yīng)相機(jī)并行接口 CPI規(guī)范的接口。
18.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述傳感器同步器響應(yīng)于所述圖像處理器。
19.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述傳感器同步器和所述組合器被集成于便攜式電子裝置中。
20.根據(jù)權(quán)利要求10所述的設(shè)備，其中所述傳感器同步器和所述組合器被集成于相機(jī)模塊中，所述相機(jī)模塊經(jīng)配置以耦合到便攜式電子裝置的處理器。
21.—種設(shè)備,其包含 用于將共同控制信號(hào)提供到多個(gè)圖像傳感器的裝置，其中所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)；以及 用于組合從所述多個(gè)圖像傳感器中的每一者接收的同步數(shù)據(jù)輸出以產(chǎn)生待經(jīng)由圖像處理器的單一相機(jī)輸入提供到所述圖像處理器的同步數(shù)據(jù)線的裝置。
22.根據(jù)權(quán)利要求21所述的設(shè)備，其進(jìn)一步包含用于接收來(lái)自所述多個(gè)圖像傳感器中的每一者的所述同步數(shù)據(jù)輸出的裝置。
23.根據(jù)權(quán)利要求21所述的設(shè)備，其進(jìn)一步包含用于在產(chǎn)生所述同步數(shù)據(jù)線之前緩沖從所述多個(gè)圖像傳感器中的至少一者接收的下一數(shù)據(jù)線的至少一部分的裝置。
24.一種非暫時(shí)性計(jì)算機(jī)可讀媒體，其包含指令，所述指令在由處理器執(zhí)行時(shí)致使所述處理器 將共同控制信號(hào)提供到多個(gè)圖像傳感器，其中所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)；以及 組合從所述多個(gè)圖像傳感器中的每一者接收的同步數(shù)據(jù)輸出，以產(chǎn)生待經(jīng)由圖像處理器的單一相機(jī)輸入提供到所述圖像處理器的同步數(shù)據(jù)線。
25.根據(jù)權(quán)利要求24所述的非暫時(shí)性計(jì)算機(jī)可讀媒體，其中所述同步數(shù)據(jù)線形成具有多個(gè)行的一幀的部分，其中每一行包括第一圖像傳感器的特定數(shù)據(jù)線和第二圖像傳感器的對(duì)應(yīng)數(shù)據(jù)線。
26.根據(jù)權(quán)利要求24所述的非暫時(shí)性計(jì)算機(jī)可讀媒體，其進(jìn)一步包含用以致使所述處理器在逐線基礎(chǔ)上交錯(cuò)從第一圖像傳感器接收的第一數(shù)據(jù)流與從第二圖像傳感器接收的第二數(shù)據(jù)流的指令。
27.根據(jù)權(quán)利要求24所述的非暫時(shí)性計(jì)算機(jī)可讀媒體，其進(jìn)一步包含用以致使所述處理器在產(chǎn)生所述同步數(shù)據(jù)線之前緩沖從第一圖像傳感器接收的下一數(shù)據(jù)線的至少一部分的指令。
28.—種設(shè)備,其包含 多個(gè)圖像傳感器，其經(jīng)耦合以接收共同控制信號(hào)且響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)； 傳感器同步器，其經(jīng)配置以將所述共同控制信號(hào)提供到所述多個(gè)圖像傳感器；以及組合器，其經(jīng)配置以組合從所述多個(gè)圖像傳感器中的每一者接收的同步數(shù)據(jù)輸出，以產(chǎn)生待經(jīng)由圖像處理器的單一相機(jī)輸入提供到所述圖像處理器的同步數(shù)據(jù)線。
29.根據(jù)權(quán)利要求28所述的設(shè)備，其進(jìn)一步包含 圖像信號(hào)處理器，其經(jīng)耦合以處理所述同步數(shù)據(jù)線；以及 顯示裝置，其經(jīng)配置以顯示經(jīng)處理的圖像數(shù)據(jù)。
全文摘要
本發(fā)明揭示一種組合來(lái)自多個(gè)傳感器的數(shù)據(jù)的方法。所述方法包括將共同控制信號(hào)提供到多個(gè)圖像傳感器。所述多個(gè)圖像傳感器中的每一者響應(yīng)于所述共同控制信號(hào)以產(chǎn)生圖像數(shù)據(jù)。所述方法還包括接收來(lái)自所述多個(gè)圖像傳感器中的每一者的同步數(shù)據(jù)輸出，組合來(lái)自所述多個(gè)圖像傳感器中的每一者的所述同步數(shù)據(jù)輸出以產(chǎn)生同步數(shù)據(jù)線，且經(jīng)由圖像處理器的單一相機(jī)輸入將所述同步數(shù)據(jù)線提供到所述圖像處理器。
文檔編號(hào)H04N5/232GK102859987SQ201180020830
公開(kāi)日2013年1月2日 申請(qǐng)日期2011年4月5日 優(yōu)先權(quán)日2010年4月5日
發(fā)明者塞爾久·R·戈馬, 黃豪, 約瑟夫·張, 米利沃耶·阿列克西克 申請(qǐng)人:高通股份有限公司