本發(fā)明涉及汽車安全輔助駕駛，尤其涉及一種基于oms攝像頭并采用rgb-ir的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)。

背景技術(shù)：

1、目前，為保證機(jī)動(dòng)車駕駛員和乘員的安全性，機(jī)動(dòng)車上通常安裝有輔助駕駛員判斷自身狀態(tài)的乘員監(jiān)控系統(tǒng)oms。乘員監(jiān)控系統(tǒng)oms(occupant?monitoring?system)是dms系統(tǒng)的延伸，可以通過(guò)監(jiān)測(cè)座艙內(nèi)乘客的感知數(shù)據(jù)來(lái)進(jìn)一步提升汽車的安全性能，如發(fā)生危險(xiǎn)行為會(huì)發(fā)出警報(bào)提醒。乘員監(jiān)控系統(tǒng)oms是依賴攝像頭的圖像輸入，利用深度學(xué)習(xí)算法，實(shí)時(shí)對(duì)駕駛員以及乘員進(jìn)行人臉識(shí)別、疲勞監(jiān)測(cè)、注意力監(jiān)測(cè)以及行為動(dòng)作監(jiān)測(cè)等進(jìn)行監(jiān)測(cè)。圖像質(zhì)量就成為了整個(gè)座艙視覺(jué)監(jiān)控系統(tǒng)關(guān)鍵的一環(huán)。在正常用車環(huán)境中，存在光線比較暗的情況，進(jìn)而導(dǎo)致采集到的圖像質(zhì)量較差，如何準(zhǔn)確、實(shí)時(shí)的獲取當(dāng)前環(huán)境下車輛座艙中的可視能力是當(dāng)前亟需解決的一個(gè)問(wèn)題，另外目前市面上的乘員監(jiān)控系統(tǒng)的功能也相對(duì)簡(jiǎn)單。

技術(shù)實(shí)現(xiàn)思路

1、鑒于上述問(wèn)題，本發(fā)明的目的是提供一種基于oms攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)，使用rgb-ir技術(shù)并通過(guò)一個(gè)傳感器設(shè)備即可同時(shí)捕捉到rgb彩圖和ir圖，也就是同時(shí)擁有白天和夜間的可視能力，以克服上述現(xiàn)有技術(shù)的不足。

2、本發(fā)明提供的一種基于oms攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)，包括：安裝在內(nèi)后視鏡附近的oms攝像頭總成，所述oms攝像頭總成包括：攝像頭外殼、前面板、后蓋、oms鏡頭、led燈和pcba板，所述pcba板上還集成有報(bào)警模塊、遺留物監(jiān)控及查找模塊、報(bào)警處理模塊、rgb-ir模塊、以及isp判定模塊；

3、所述攝像頭外殼內(nèi)部開(kāi)設(shè)有兩個(gè)前端安裝腔和一個(gè)后端安裝腔，所述oms鏡頭和led燈鑲嵌在兩個(gè)前端安裝腔內(nèi)，所述前面板安裝在攝像頭外殼前端并且前面板上對(duì)應(yīng)oms鏡頭和led燈位置開(kāi)設(shè)有兩個(gè)避讓孔；

4、所述pcba板鑲嵌在后端安裝腔內(nèi)，所述后蓋安裝在攝像頭外殼后端并將pcba板密封在攝像頭外殼內(nèi)；

5、所述pcba板包括：安裝在電路板上的圖像傳感器、圖像處理器、編碼器、燈驅(qū)動(dòng)模塊、連接器、以及電源，所述圖像傳感器與oms鏡頭連接并用于采集圖像，所述圖像處理器分別與圖像傳感器、編碼器和燈驅(qū)動(dòng)模塊連接，所述圖像處理器用于接收?qǐng)D像傳感器的圖像信息并進(jìn)行處理識(shí)別，所述編碼器用于將圖像處理器處理后的數(shù)據(jù)進(jìn)行編制、轉(zhuǎn)換為通訊信號(hào)，所述連接器用于將編碼器處理后的通訊信號(hào)向外傳輸，所述燈驅(qū)動(dòng)模塊用于驅(qū)動(dòng)led燈，所述電源用于為電路板供電；

6、所述rgb-ir模塊用于通過(guò)圖像傳感器捕捉rgb彩色圖像和ir紅外圖像并將rgb彩色圖像和紅外圖像輸出至圖像處理器；

7、所述isp判定模塊用于識(shí)別并判定圖像傳感器采集的圖像亮暗情況，以及根據(jù)圖像亮暗情況自動(dòng)切換rgb-ir模塊的rgb彩色圖像輸出或者ir紅外圖像輸出，其中，在光線比較暗的情況下切換為ir圖像輸出，在光線充足的情況下切換為rgb彩色圖像輸出；

8、所述報(bào)警模塊用于判斷駕駛員及乘員是否有危險(xiǎn)行為，當(dāng)出現(xiàn)危險(xiǎn)行為時(shí)發(fā)出警報(bào)提醒；乘員危險(xiǎn)行為包括是否系安全帶、肢體是否伸出窗外等；其中，警報(bào)提醒包括以下方式的一種或多種，以下方式包括：語(yǔ)音提醒、方向盤(pán)振動(dòng)提醒、儀表盤(pán)顯示提醒、安全帶振動(dòng)提醒；

9、所述遺留物監(jiān)控及查找模塊用于對(duì)車內(nèi)遺留物品和遺留生物進(jìn)行監(jiān)控以及查找，其中，識(shí)別的遺留生物包括寵物、兒童，識(shí)別的遺留物品包括手提包、鑰匙、文件等；

10、所述報(bào)警處理模塊用于用戶接收車內(nèi)生物遺留報(bào)警和用戶解除生物遺留報(bào)警；其中，用戶接收車內(nèi)生物遺留報(bào)警方式包括當(dāng)車主熄火鎖車并離車后自主檢測(cè)車內(nèi)是否有遺留生物并檢測(cè)危險(xiǎn)性，利用app或callcenter通知車主可能存在生物遺留危險(xiǎn)性報(bào)警，提示車主盡快返車處理；其中，用戶解除生物遺留報(bào)警方式包括：車主收到生物遺留報(bào)警后車主返回并完成處理，或者車主在app上遠(yuǎn)程處理(打開(kāi)車窗)并點(diǎn)擊消除報(bào)警，或者撥打callcenter確認(rèn)消除報(bào)警。

11、作為本發(fā)明的優(yōu)選，所述oms攝像頭總成的fov視角范圍：水平視角130度，垂直視角96度。

12、本發(fā)明另一個(gè)目的是提供一種基于oms攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)的處理方法，具體包括以下步驟：

13、步驟s1：在oms攝像頭總成上采用rgb-ir方法，通過(guò)isp判定圖像亮暗，在光線比較暗的情況下自動(dòng)切換為ir圖像輸出，增強(qiáng)現(xiàn)實(shí)效果。使用rgb-ir技術(shù)可以通過(guò)一個(gè)傳感器設(shè)備同時(shí)捕捉到rgb彩圖和ir圖，也就是同時(shí)擁有白天和夜間的可視能力；其中，rgb-ir方法允許一個(gè)傳感器同時(shí)捕捉rgb彩色圖像和紅外圖像，這提供了白天和夜晚的雙重可視能力，增強(qiáng)了在不同光照條件下的圖像質(zhì)量。

14、步驟s2：利用報(bào)警模塊判斷駕駛員及乘員是否有危險(xiǎn)行為，當(dāng)出現(xiàn)危險(xiǎn)行為時(shí)發(fā)出警報(bào)提醒；其中，乘員危險(xiǎn)行為包括是否系安全帶、肢體是否伸出窗外，警報(bào)提醒包括以下方式的一種或多種，以下方式包括：語(yǔ)音提醒、方向盤(pán)振動(dòng)提醒、儀表盤(pán)顯示提醒、安全帶振動(dòng)提醒；

15、步驟s3：利用遺留物監(jiān)控及查找模塊對(duì)車內(nèi)遺留物品和遺留生物進(jìn)行監(jiān)控以及查找，其中，識(shí)別的遺留生物包括寵物、兒童，識(shí)別的遺留物品包括手提包、鑰匙、文件；

16、步驟s4：利用報(bào)警處理模塊通知用戶接收車內(nèi)生物遺留報(bào)警和用戶解除生物遺留報(bào)警；其中，用戶接收車內(nèi)生物遺留報(bào)警方式包括當(dāng)車主熄火鎖車并離車后自主檢測(cè)車內(nèi)是否有遺留生物并檢測(cè)危險(xiǎn)性，利用app或callcenter通知車主可能存在生物遺留危險(xiǎn)性報(bào)警，提示車主盡快返車處理；其中，用戶解除生物遺留報(bào)警方式包括：車主收到生物遺留報(bào)警后車主返回并完成處理，或者車主在app上遠(yuǎn)程處理(打開(kāi)車窗)并點(diǎn)擊消除報(bào)警，或者撥打callcenter確認(rèn)消除報(bào)警。

17、本發(fā)明的有益效果如下：

18、1、本發(fā)明通過(guò)監(jiān)測(cè)座艙內(nèi)乘客的感知數(shù)據(jù)來(lái)進(jìn)一步提升汽車的安全性能，如發(fā)生危險(xiǎn)行為會(huì)發(fā)出警報(bào)提醒，并且可對(duì)車內(nèi)遺留物進(jìn)行監(jiān)控，使得遺留在車內(nèi)的寵物和兒童得到安全提示。

19、2、本發(fā)明通過(guò)判斷駕駛員及乘員是否有危險(xiǎn)行為，出現(xiàn)危險(xiǎn)行為時(shí)會(huì)發(fā)出警報(bào)提醒。另外，警報(bào)模塊增加有多種報(bào)警提醒方式，進(jìn)一步提升安全性能。

20、3、本發(fā)明的攝像頭采用rgb-ir技術(shù)，通過(guò)isp判定圖像亮暗，在光線比較暗的情況下自動(dòng)切換為ir圖像輸出，增強(qiáng)現(xiàn)實(shí)效果。使用rgb-ir技術(shù)可以通過(guò)一個(gè)傳感器設(shè)備同時(shí)捕捉到rgb彩圖和ir圖，也就是同時(shí)擁有白天和夜間的可視能力。

21、附圖說(shuō)明

22、通過(guò)參考以下結(jié)合附圖的說(shuō)明，并且隨著對(duì)本發(fā)明的更全面理解，本發(fā)明的其它目的及結(jié)果將更加明白及易于理解。在附圖中：

23、圖1為本實(shí)施例1的整體結(jié)構(gòu)示意圖。

24、圖2為本實(shí)施例1的電路框圖。

技術(shù)特征：

1.一種基于oms攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)，其特征在于，包括：安裝在內(nèi)后視鏡附近的oms攝像頭總成，所述oms攝像頭總成包括：攝像頭外殼、前面板、后蓋、oms鏡頭、led燈和pcba板，所述pcba板上還集成有報(bào)警模塊、遺留物監(jiān)控及查找模塊、報(bào)警處理模塊、rgb-ir模塊、以及isp判定模塊；

2.根據(jù)權(quán)利要求1所述的一種基于oms攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)，其特征在于，所述oms攝像頭總成的fov視角范圍：水平視角130度，垂直視角96度。

3.根據(jù)權(quán)利要求1所述的一種基于oms攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)的處理方法，其特征在于，包括以下步驟：

技術(shù)總結(jié)
本發(fā)明涉及一種基于OMS攝像頭的汽車艙內(nèi)乘員監(jiān)控系統(tǒng)，包括：安裝在內(nèi)后視鏡附近的OMS攝像頭總成，所述OMS攝像頭總成包括：攝像頭外殼、前面板、后蓋、OMS鏡頭、LED燈和PCBA板，所述PCBA板上還集成有報(bào)警模塊、遺留物監(jiān)控及查找模塊、報(bào)警處理模塊、RGB?IR模塊、以及ISP判定模塊；所述PCBA板包括：安裝在電路板上的圖像傳感器、圖像處理器、編碼器、燈驅(qū)動(dòng)模塊、連接器、以及電源；本發(fā)明的優(yōu)點(diǎn)是：通過(guò)監(jiān)測(cè)座艙內(nèi)乘客的感知數(shù)據(jù)來(lái)進(jìn)一步提升汽車的安全性能，如發(fā)生危險(xiǎn)行為會(huì)發(fā)出警報(bào)提醒，并且可對(duì)車內(nèi)遺留物進(jìn)行監(jiān)控，使得遺留在車內(nèi)的寵物和兒童得到安全提示。

技術(shù)研發(fā)人員：楊明旭,崔志明,遲會(huì)生,董光
受保護(hù)的技術(shù)使用者：長(zhǎng)春富晟汽車技術(shù)研發(fā)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/30