24)、開關(guān)單元(25)和MUX(29)的配置,因此將集中于與圖1的第一實(shí)施例的不同點(diǎn)進(jìn)行說明。
[0063]相機(jī)單元⑴的第一傳感器單元和第二傳感器單元(11和13)分別獲得左RGB圖像和右RGB圖像或RGB圖像和IR圖像。IR發(fā)射單元(12)在正常光照強(qiáng)度下處于關(guān)狀態(tài),并且在光接收單元(14)檢測到光水平小于預(yù)定光照強(qiáng)度的光照強(qiáng)度的情況下通過控制器
(24)的控制變?yōu)榇蜷_狀態(tài)。
[0064]光接收單元(14)可以接收布置有相機(jī)單元(I)的區(qū)域的光,并且將光(光照)強(qiáng)度傳送到深度圖像生成單元(2)的控制器(24)。光接收單元(14)可以是光傳感器或亮度傳感器,但是本公開不限于此。
[0065]控制器(24)可以從光接收單元(14)接收光強(qiáng)度,并且在所接收的光強(qiáng)度小于預(yù)定光水平時(shí)打開IR發(fā)射單元(12),以及在所接收的光強(qiáng)度大于預(yù)定光水平時(shí)控制開關(guān)單元(22)關(guān)閉IR發(fā)射單元(12)。開關(guān)單元(22)可以響應(yīng)于控制器(24)的控制切換IR發(fā)射單元(12)的打開和關(guān)閉。
[0066]根據(jù)本公開的第二示例性實(shí)施例的同步單元(21)可以在正常光照強(qiáng)度的情況下從第一傳感器單元和第二傳感器單元(11和13)接收RGB圖像,而在光照強(qiáng)度小于預(yù)定光照強(qiáng)度的情況下接收RGB圖像和IR圖像。
[0067]因此,同步單元(21)可以執(zhí)行左圖像和右圖像的接收時(shí)間被均衡地調(diào)整的同步,其中,在正常光照的情況下(即,僅接收到RBG圖像的情況下),同步單元(21)將RGB圖像傳送到RGB內(nèi)插單元(41),而在光照水平小于預(yù)定光照水平的情況下(即,在接收到RGB圖像和IR圖像的情況下),將RGB圖像傳送到RGB內(nèi)插單元(41)并且將IR圖像傳送到IR內(nèi)插單元(28)。
[0068]盡管本公開的第二示例性實(shí)施例說明了將IR圖像與RGB圖像分開,以分別生成深度圖像和彩色圖像,但是也可以同時(shí)提供IR圖像和RGB圖像來生成深度圖像。
[0069]此外,在對由第一傳感器單元和第二傳感器單元(11和13)獲得的圖像執(zhí)行內(nèi)插以提供給同步單元(21)的情況下,可以不包括IR內(nèi)插單元(28)和RGB內(nèi)插單元(41),以及在該情況下,可以將執(zhí)行了由同步單元進(jìn)行的同步的左圖像和右圖像直接提供給合成單元(42)和 MUX (29) ο
[0070]也就是說,在正常光照強(qiáng)度下,執(zhí)行了由同步單元(21)進(jìn)行的同步的RGB圖像可以提供給MUX(29)以生成深度圖像,并且可以提供給合成單元(42)以生成深度圖像。此外,在光照強(qiáng)度小于預(yù)定光照強(qiáng)度的情況下,同步單元(21)可以執(zhí)行同步,并且RGB圖像可以提供給合成單元(42)而IR圖像可被提供給MUX (29),以分別生成彩色圖像和深度圖像。
[0071]現(xiàn)在,將描述根據(jù)本公開的第二示例性實(shí)施例的圖像處理系統(tǒng)的操作。
[0072]在正常光照強(qiáng)度的情況下,即,在由光接收單元(14)檢測的光照強(qiáng)度處于正常光水平內(nèi)的情況下,根據(jù)本公開的第二示例性實(shí)施例的圖像處理系統(tǒng)被操作,以使得同步單元(21)對由第一傳感器單元和第二傳感器單元(11,13)獲得的RGB圖像執(zhí)行同步,并且RGB內(nèi)插單元(41)對執(zhí)行了同步的左圖像和右圖像執(zhí)行RGB內(nèi)插。
[0073]此時(shí),可以將RGB圖像中的黑白數(shù)據(jù){例如,亮度⑴數(shù)據(jù)}從RGB內(nèi)插單元(41)提供給MUX(29),并且對準(zhǔn)單元(22)可以對準(zhǔn)與黑白數(shù)據(jù)有關(guān)的左圖像和右圖像,而生成單元(23)可以生成其的深度圖像。僅黑白圖像用于深度圖像的生成,因此,可以通過該方法來生成深度圖像。
[0074]此外,通過RGB內(nèi)插單元(41)內(nèi)插的圖像被提供給合成單元(42),以合成為彩色圖像,并且會聚角控制器(43)執(zhí)行會聚角控制,由此輸出彩色圖像。該輸出連同為生成單元(23)的輸出的深度圖像被提供給編碼器單元(3)。此時(shí),IR發(fā)射單元(12)的電源處于關(guān)狀態(tài)。
[0075]然而,在由光接收單元檢測的光的光照強(qiáng)度小于預(yù)定光照強(qiáng)度的情況下,控制器
(24)控制開關(guān)單元(25)將IR發(fā)射單元(12)的電源變?yōu)榇蜷_狀態(tài)。在IR發(fā)射單元(12)變?yōu)榇蜷_狀態(tài)以向目標(biāo)發(fā)射IR的情況下,第一傳感器單元和第二傳感器單元(11和13)分別獲得RGB圖像和IR圖像。
[0076]此后,同步單元(21)對左RGB圖像與右RGB圖像以及IR圖像執(zhí)行同步,其中,IR圖像被傳送到IR內(nèi)插單元(28)而RGB圖像被傳送到RGB內(nèi)插單元(41)。為此,可以將分發(fā)IR圖像和RGB圖像的分發(fā)單元布置在同步單元(21)的后端處,這已被說明過。
[0077]IR內(nèi)插單元(28)對傳送的IR圖像執(zhí)行內(nèi)插,并且將內(nèi)插的IR圖像傳送到MUX(29) ο在該情況下,MUX(29)的輸入是內(nèi)插的IR圖像,并且MUX(29)將內(nèi)插的IR圖像輸出到對準(zhǔn)單元(22)。對準(zhǔn)單元(22)可以對左圖像和右圖像(即,IR圖像)進(jìn)行對準(zhǔn),對準(zhǔn)的左圖像和右圖像可以由生成單元(23)接收,以生成深度圖像。
[0078]此外,從同步單元(21)傳送到RGB內(nèi)插單元(41)的RGB圖像由RGB內(nèi)插單元(41)內(nèi)插,內(nèi)插的圖像被提供給合成單元(42)以合成為彩色圖像(其為3D格式),而會聚角控制器(43)執(zhí)行會聚角控制,由此可以輸出彩色圖像。該輸出連同為生成單元(23)的輸出的深度圖像被提供給編碼器單元(3)。
[0079]根據(jù)本公開的第二示例性實(shí)施例,圖像處理系統(tǒng)可以檢測低亮度級別,同時(shí)在正常光水平下執(zhí)行通常操作,以除獲得RGB圖像以外還獲得IR圖像,由此可以生成精確的深度圖像。
[0080]圖3是示出了根據(jù)本公開的第三示例性實(shí)施例的圖像處理系統(tǒng)的框圖。
[0081]參照圖3,根據(jù)本公開的第三示例性實(shí)施例的圖像處理系統(tǒng)可以包括相機(jī)單元
(1)、深度圖像生成單元(2)和彩色圖像生成單元(4),其中,可以將從深度圖像生成單元
(2)提取的立體圖像的深度圖像和從彩色圖像生成單元(4)輸出的彩色圖像提供給編碼器單元⑶。
[0082]根據(jù)本公開的第三示例性實(shí)施例的相機(jī)單元⑴可以包括第一傳感器單元(11)、IR發(fā)射單元(12)和第二傳感器單元(13),其中,深度圖像生成單元(2)可以包括同步單元
(21)、對準(zhǔn)單元(22) ,IR內(nèi)插單元(28) ,MUX(29)、對準(zhǔn)單元(22)、生成單元(23)、光照檢測器(26)和開關(guān)單元(27) ο
[0083]就結(jié)構(gòu)而言,本公開的第三示例性實(shí)施例與圖1的本公開的第一實(shí)施例不同之處在于第三實(shí)施例包括深度圖像生成單元(2)的光照檢測器(26)、開關(guān)單元(27)和MUX(29),因此將關(guān)注與第一實(shí)施例的不同點(diǎn)進(jìn)行說明。此外,還將省略任何與第二示例性實(shí)施例重疊的說明。
[0084]相機(jī)單元(I)的第一傳感器單元和第二傳感器單元(11和13)分別獲得左RGB圖像和右RGB圖像以及/或IR圖像。IR發(fā)射單元(12)在正常光照強(qiáng)度下處于關(guān)狀態(tài),而在深度圖像生成單元(2)的光照檢測器(26)的光照強(qiáng)度小于預(yù)定光照強(qiáng)度的情況下通過開關(guān)單元(27)的切換變?yōu)榇蜷_狀態(tài)。
[0085]深度圖像生成單元⑵的光照檢測器(26)接收執(zhí)行了由同步單元(21)進(jìn)行的同步的RGB圖像,以監(jiān)測圖像的像素值的平均值,以及在像素的平均值小于閾值(其被確定為低光照強(qiáng)度)的情況下,使開關(guān)單元(27)將IR發(fā)射單元(12)變?yōu)榇蜷_狀態(tài)。
[0086]開關(guān)單元(27)響應(yīng)于光照檢測器(26)的控制來切換IR發(fā)射單元(12)的打開和關(guān)閉。
[0087]根據(jù)本公開的第三示例性實(shí)施例的同步單元(21)在正常光照強(qiáng)度下可以從第一傳感器單元和第二傳感器單元(11和13)接收RGB圖像,以及在光照強(qiáng)度小于預(yù)定光照強(qiáng)度的情況下可以接收RGB圖像和IR圖像。
[0088]現(xiàn)在,將描述根據(jù)本公開的第三示例性實(shí)施例的圖像處理系統(tǒng)的操作。
[0089]在正常光照強(qiáng)度的情況下,S卩,由光照檢測器(26)檢測的光照強(qiáng)度處于正常光水平內(nèi)的情況下,根據(jù)本公開的第三示例性實(shí)施例的圖像處理系統(tǒng)被操作,以使得同步單元
(21)對第一傳感器單元和第二傳感器單元(11和13)獲得的RGB圖像執(zhí)行同步,而RGB內(nèi)插單元(41)對執(zhí)行了同步的左圖像和右圖像執(zhí)行RGB內(nèi)插。
[0090]此時(shí),可以將RGB圖像中的黑白數(shù)據(jù){例如