顯示控制裝置、顯示控制裝置的顯示控制方法、視線方向檢測系統(tǒng)以及視線方向檢測系統(tǒng) ...的制作方法
【專利摘要】本發(fā)明判斷駕駛員是否正在對視線方向上的注視目標(biāo)進(jìn)行注視，對被判斷為駕駛員正在注視的注視目標(biāo)的顯示形態(tài)加以改變，引導(dǎo)駕駛員的視線，從而高精度且快速地執(zhí)行視線方向檢測信息的校準(zhǔn)。
【專利說明】
顯示控制裝置、顯示控制裝置的顯示控制方法、視線方向檢測系統(tǒng)以及視線方向檢測系統(tǒng)的校準(zhǔn)控制方法
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及一種對視線方向檢測裝置檢測出的視線方向檢測信息的校準(zhǔn)進(jìn)行控制的顯示控制裝置、顯示控制裝置的顯示控制方法、視線方向檢測系統(tǒng)以及視線方向檢測系統(tǒng)的校準(zhǔn)控制方法。
【背景技術(shù)】
[0002]近年來，提議有使用通過視線方向檢測裝置檢測出的對象，例如駕駛員的視線方向進(jìn)行各種處理的系統(tǒng)。提議有眾多使用視線方向檢測裝置的系統(tǒng)，例如進(jìn)行不專心駕駛及疲勞駕駛檢測的檢測裝置、利用視線操作智能板等的人機界面(HMI)等。
此外，視線方向檢測裝置中視線方向的檢測提議有各種方法，其中，較為有名的是角膜反射法等，即對檢測對象的眼睛照射紅外線發(fā)光二極管(紅外線LED)的光，根據(jù)其角膜表面的反射像與瞳孔的位置關(guān)系，檢測視線的朝向。
[0003]在利用視線方向檢測裝置進(jìn)行視線方向檢測時，通常會伴有對象的個體差異引起的檢測誤差，因而需要校正各個對象的檢測誤差，即實施校準(zhǔn)以確保檢測精度。此外，即便為同一對象，距離前一次校準(zhǔn)已過去一段時間后環(huán)境發(fā)生了變化，有可能會再次產(chǎn)生檢測誤差。因此，最好能定期實施校準(zhǔn)。
[0004]視線方向檢測裝置的校準(zhǔn)基本上都需要對2個以上的基準(zhǔn)點進(jìn)行測定，所測定的基準(zhǔn)點越多，視線方向檢測信息的差異越趨于平坦化，校準(zhǔn)精度也會有所提高。例如，通常在具有四邊形顯示部的裝置中，最好在角部附近的4個點和對角線交點即顯示部的中央點處，快速地實施視線方向檢測信息的校準(zhǔn)。
然而，為了對多個基準(zhǔn)點例如上述示例中的5個點進(jìn)行測定，需要讓對象分別將視線朝向預(yù)先規(guī)定的5個基準(zhǔn)點等，迫使對象開展繁瑣的操作，造成其負(fù)擔(dān)。因此，要求具備一種能在對象無意識的狀態(tài)下也能自動實施校準(zhǔn)的裝置，在以下文獻(xiàn)中提議有相關(guān)裝置。
[0005]例如，在專利文獻(xiàn)1、2中提議有一種裝置，其使用汽車配件作為基準(zhǔn)點即注視目標(biāo)，從而能在駕駛員無意識的狀態(tài)下也能自動實施校準(zhǔn)。
另外，作為注視目標(biāo)的汽車配件，可列舉室內(nèi)鏡、后視鏡、導(dǎo)航系統(tǒng)、空調(diào)、平視顯示器等。
[0006]專利文獻(xiàn)I檢測駕駛員的視線方向，并根據(jù)檢測結(jié)果，推測駕駛員正在注視的汽車配件。并且，預(yù)先將駕駛員看向該汽車配件的方向設(shè)定為視線方向的基準(zhǔn)，基于作為該基準(zhǔn)的視線方向與通過視線方向檢測裝置檢測出的視線方向之間的誤差，實施校準(zhǔn)。此外，專利文獻(xiàn)2中，使駕駛員進(jìn)行各設(shè)備操作時的視線與被執(zhí)行相關(guān)操作的設(shè)備的位置相對應(yīng)，從而實施視線方向檢測裝置的校準(zhǔn)。另外，在該專利文獻(xiàn)2中還公開了基于駕駛員注視點的分布狀態(tài)，推測注視目標(biāo)存在于分布狀態(tài)中心的情況。
現(xiàn)有技術(shù)文獻(xiàn)專利文獻(xiàn)
[0007]專利文獻(xiàn)1:日本專利特開2010-30361號公報專利文獻(xiàn)2:日本專利特開平9-238905號公報

【發(fā)明內(nèi)容】

發(fā)明所要解決的技術(shù)問題
[0008]專利文獻(xiàn)1、2以駕駛員無意識地完成校準(zhǔn)為目的，將駕駛員能夠目視確認(rèn)的汽車配件設(shè)為注視目標(biāo)。
然而，我們并不知道駕駛員何時會看向汽車配件，在對2個以上基準(zhǔn)點進(jìn)行測定前可能需要較長時間。
因此，根據(jù)專利文獻(xiàn)1、2所公開的現(xiàn)有技術(shù)，無法快速地實施合適的校準(zhǔn)，視線方向檢測信息中存在檢測誤差的狀態(tài)有可能會持續(xù)較長時間，在此期間，不能保證可高精度地對使用上述視線方向檢測裝置的系統(tǒng)進(jìn)行操作。
[0009]此外，專利文獻(xiàn)1、2將汽車配件設(shè)為注視目標(biāo)，因而與通常用作校準(zhǔn)注視目標(biāo)的其他物品相比，其尺寸較大。從而會存在如下問題:例如駕駛員集中注意力注視預(yù)先設(shè)定的基準(zhǔn)點的可能性小，視線方向檢測裝置的視線方向檢測信息的差異變大。因此，即便看向同一汽車配件，也會由于其視線方向的偏差較大，因而難以提高校準(zhǔn)精度。
[0010]再者，如專利文獻(xiàn)2所述，在室內(nèi)鏡及后視鏡是注視目標(biāo)的情況下，障礙物并不一定會反射在室內(nèi)鏡或后視鏡的中心部。因此，例如即便在室內(nèi)鏡的中心部設(shè)定作為基準(zhǔn)點的視線方向，但駕駛員也不一定會看向室內(nèi)鏡的中心部，因而會產(chǎn)生偏差。
因此，在使用駕駛員隔著鏡子看向障礙物時所收集到的注視點的分布狀態(tài)來檢測視線方向的情況下，檢測結(jié)果出現(xiàn)偏差的可能性也較高。
再者，如果基于駕駛員注視的注視點分布狀態(tài)進(jìn)行校準(zhǔn)，則駕駛員需要多次注視室內(nèi)鏡及后視鏡，需要花費一定時間。
[0011]另外，在將車載設(shè)備的操作開關(guān)設(shè)為注視目標(biāo)時，駕駛員不一定會看向操作開關(guān)的中心點進(jìn)行操作。這種情況下，如果縮小操作開關(guān)，可以預(yù)測到視線方向檢測信息的偏差會變小。然而，如果縮小操作開關(guān)，其可識別性或使用該操作開關(guān)的設(shè)備的可操作性可能會降低。
[0012]本發(fā)明是為了解決上述問題開發(fā)而成，其目的在于獲得一種能夠高精度且準(zhǔn)確地實施校準(zhǔn)的校準(zhǔn)控制裝置、校準(zhǔn)控制方法以及使用其的視線方向檢測系統(tǒng)，所述校準(zhǔn)是對象視線方向的檢測相關(guān)的校準(zhǔn)。
本發(fā)明是為了解決上述問題而完成的，其目的在于獲得一種能夠高精度且快速地實施對象視線方向檢測信息的校準(zhǔn)的顯示控制裝置、顯示控制裝置的顯示控制方法、視線方向檢測系統(tǒng)以及視線方向檢測系統(tǒng)的校準(zhǔn)控制方法。
解決技術(shù)問題所采用的技術(shù)方案
[0013]本發(fā)明所涉及的顯示控制裝置將顯示部顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)來控制視線方向檢測裝置的校準(zhǔn)，該顯示控制裝置具備:視線狀態(tài)判斷部，該視線狀態(tài)判斷部基于視線方向檢測裝置檢測出的視線方向檢測信息和顯示物的顯示信息，來判斷對象是否正在注視存在于其視線方向上的注視目標(biāo);視線引導(dǎo)部，該視線引導(dǎo)部輸出注視目標(biāo)的顯示信息以及注視目標(biāo)的顯示形態(tài)相關(guān)的畫面控制信息，并在判斷為對象正在對注視目標(biāo)進(jìn)行注視時，改變注視目標(biāo)的顯示形態(tài)，從而引導(dǎo)對象的視線；顯示控制部，該顯示控制部基于視線引導(dǎo)部輸出的畫面控制信息，輸出對顯示部進(jìn)行控制的顯示控制信息；以及校準(zhǔn)控制部，該校準(zhǔn)控制部在判斷為對象正在對注視目標(biāo)進(jìn)行注視時，向視線方向檢測裝置輸出校準(zhǔn)控制信號。
發(fā)明效果
[0014]根據(jù)本發(fā)明，具有能夠高精度且快速地實施對象視線方向檢測信息的校準(zhǔn)的效果O
【附圖說明】
[0015]圖1是表示本發(fā)明實施方式I所涉及的視線方向檢測系統(tǒng)的構(gòu)成的框圖。
圖2是表示圖1的視線方向檢測裝置的構(gòu)成的框圖。
圖3是表示圖1的視線狀態(tài)判斷部的構(gòu)成的框圖。
圖4是表示圖1的校準(zhǔn)控制部的構(gòu)成的框圖。
圖5是表示圖1的視線引導(dǎo)部的構(gòu)成的框圖。
圖6是表示圖1的顯示控制部的構(gòu)成的框圖。
圖7是表示本發(fā)明實施方式I所涉及的顯示控制裝置的動作的流程圖。
圖8是表示將注視目標(biāo)朝向基準(zhǔn)點縮小并引導(dǎo)視線的顯示畫面的示例圖。
圖9是表示將注視目標(biāo)和接下來應(yīng)注視的目標(biāo)配置在不同位置并引導(dǎo)視線的顯示畫面的示例圖。
圖10是表示移動注視目標(biāo)并引導(dǎo)視線的顯示畫面的示例圖。
圖11是表示移動注視目標(biāo)并引導(dǎo)視線的顯示畫面的其他示例圖。
圖12是表示畫面跳轉(zhuǎn)時引導(dǎo)視線的顯示畫面的示例圖。
圖13是表示視線引導(dǎo)模式的解除處理的流程圖。
圖14是表示本發(fā)明實施方式2所涉及的視線方向檢測系統(tǒng)的構(gòu)成的框圖。
【具體實施方式】
[0016]為了更詳細(xì)地說明本發(fā)明，以下，依照附圖，對本發(fā)明的實施方式進(jìn)行說明。
實施方式1.圖1是表示本發(fā)明實施方式I所涉及的視線方向檢測系統(tǒng)的構(gòu)成的框圖。圖1所示的視線方向檢測系統(tǒng)是例如搭載于汽車等移動物體并檢測作為對象的駕駛員的視線方向的系統(tǒng)，由視線方向檢測裝置1、顯示控制裝置2及顯示部3構(gòu)成。
視線方向檢測裝置I設(shè)置于車廂內(nèi)駕駛員的前方，輸出包括駕駛員視線方向在內(nèi)的視線方向檢測信息。由視線方向檢測裝置I檢測出的對象的視線方向檢測信息被用于例如進(jìn)行不專心駕駛及疲勞駕駛檢測的檢測裝置、利用視線操作智能板等的HMI中。
[0017]顯示控制裝置2是將顯示部3顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)，對視線方向檢測裝置I輸出的視線方向檢測信息的校準(zhǔn)進(jìn)行控制的顯示控制裝置，具備視線狀態(tài)判斷部20、校準(zhǔn)控制部21、視線引導(dǎo)部22以及顯示控制部23。
另外，注視目標(biāo)是由顯示部3顯示并被作為駕駛員注視的基準(zhǔn)點而使用的顯示物，是預(yù)先設(shè)定的顯示物?？闪信e例如作為顯示部的智能板或車載導(dǎo)航裝置的顯示部所顯示的圖標(biāo)、按鈕或者作為顯示部的平視顯示器(以下，簡稱為HUD)所顯示的標(biāo)記等。另外，基準(zhǔn)點可根據(jù)顯示部任意設(shè)定，設(shè)定在用于執(zhí)行視線方向檢測信息的校準(zhǔn)的理想位置上。此外，以上例示了5個點作為基準(zhǔn)點，但也可以根據(jù)所應(yīng)用的顯示部，使基準(zhǔn)點少于5個點，反之，也可以將基準(zhǔn)點設(shè)定為多于5個點。
[0018]顯示部3是根據(jù)從顯示控制裝置2獲得的顯示控制信息，改變畫面顯示的顯示部，設(shè)置在例如車廂內(nèi)駕駛員的前方。
另外，顯示部3也可以是類似智能板等顯示汽車信息、導(dǎo)航信息、音響信息、空調(diào)信息等的顯示裝置。此外，還可以是車載導(dǎo)航系統(tǒng)、顯示屏音響、HUD等。
在圖1中，虛線所示的信息流是后述實施方式中所需要的內(nèi)容，此處并不一定需要。因此，對于虛線所示的信息流，在需要的部分進(jìn)行說明，此處省略其說明。
[0019]在圖1中，視線方向檢測裝置I檢測駕駛員的視線方向，并將視線方向檢測信息供應(yīng)給視線狀態(tài)判斷部20。視線狀態(tài)判斷部20獲取該視線方向檢測信息和從后述視線引導(dǎo)部22獲得的注視目標(biāo)的顯示信息。視線狀態(tài)判斷部20基于這些信息，判斷駕駛員的視線方向上是否有上述圖標(biāo)等注視目標(biāo)。進(jìn)而，在有注視目標(biāo)的情況下，則視線狀態(tài)判斷部20判斷駕駛員是否正在注視該注視目標(biāo)。視線狀態(tài)判斷部20輸出視線狀態(tài)信息作為上述結(jié)果。該視線狀態(tài)信息被賦予給校準(zhǔn)控制部21及視線引導(dǎo)部22。
[0020]視線引導(dǎo)部22基于視線狀態(tài)信息引導(dǎo)駕駛員的視線。例如，當(dāng)判斷為駕駛員正在注視作為注視目標(biāo)的特定圖標(biāo)時，視線引導(dǎo)部22通過將該圖標(biāo)的顯示范圍朝向基準(zhǔn)點縮小，從而將駕駛員的視線向基準(zhǔn)點引導(dǎo)。也就是說，視線引導(dǎo)部22通過將該圖標(biāo)的顯示范圍朝向基準(zhǔn)點縮小，從而將駕駛員的視線無意識地引導(dǎo)至基準(zhǔn)點。該操作可以通過以下方式實現(xiàn):當(dāng)判斷為駕駛員正在注視特定圖標(biāo)時，視線引導(dǎo)部22將畫面控制信息供應(yīng)給顯示控制部23，使得該圖標(biāo)的顯示范圍朝向基準(zhǔn)點縮小。顯示控制部23接收該畫面控制信息，并基于該畫面控制信息生成顯示控制信息，然后在顯示部3中將該圖標(biāo)朝向基準(zhǔn)點縮小。
[0021 ]視線引導(dǎo)部22進(jìn)而還會輸出注視目標(biāo)的顯示信息。該信息包括作為注視目標(biāo)的圖標(biāo)的位置，即基準(zhǔn)點的位置信息等。
注視目標(biāo)的顯示信息被賦予視線方向檢測裝置I及視線狀態(tài)判斷部20。也就是說，視線方向檢測裝置I輸出視線方向檢測信息并獲得注視目標(biāo)的顯示信息。這里，若獲取注視目標(biāo)的位置，則視線方向檢測裝置I能夠計算出駕駛員的視線方向。因而，基于視線方向檢測信息和通過上述計算而得出的駕駛員視線方向，視線方向檢測裝置I能夠?qū)σ暰€方向檢測信息進(jìn)行校準(zhǔn)。
[0022]另一方面，關(guān)于執(zhí)行校準(zhǔn)的時機等，依據(jù)從校準(zhǔn)控制部21賦予給視線方向檢測裝置I的校準(zhǔn)控制信號。具體而言，基于從視線狀態(tài)判斷部20輸出的視線狀態(tài)信息，例如在駕駛員正在注視特定圖標(biāo)且經(jīng)過了規(guī)定時間時，判斷為狀態(tài)穩(wěn)定，并于此時通過校準(zhǔn)控制信號指示執(zhí)行視線方向檢測信息的校準(zhǔn)。
另外，上述各部分的動作僅為一個示例，說明了動作概要，以下對其進(jìn)行詳細(xì)說明。此夕卜，關(guān)于虛線部，有需要時將在后文闡述。
[0023]圖2是表示圖1的視線方向檢測裝置I的構(gòu)成的框圖。如圖2所示，視線方向檢測裝置I由紅外線LED(發(fā)光二極管)10、視線檢測用相機11、視線方向檢測部12、校準(zhǔn)部13以及存儲器14構(gòu)成。 紅外線LED 1是用于對駕駛員的眼睛照射各種圖案的紅外光的LED。例如，對人的眼睛照射不易覺察的近紅外線。此外，視線檢測用相機11獲取被紅外線LEDlO照射紅外光的駕駛員臉部或眼睛的影像。視線檢測用相機11使用能夠拍攝紅外光的CCD等。
[0024]視線方向檢測部12對視線檢測用相機11所拍攝的影像數(shù)據(jù)進(jìn)行圖像分析，檢測出表示視線方向的視線方向檢測信息并輸出。作為視線方向檢測信息的檢測方法，使用紅外光的角膜反射法為人們所熟知，但也可以使用其他方法。此外，也可以不使用紅外線LED10，僅使用視線檢測用相機11，通過圖像分析從所拍攝的影像數(shù)據(jù)中檢測出視線方向。
[0025]校準(zhǔn)部13具有對視線方向檢測部12的視線方向檢測信息進(jìn)行校準(zhǔn)處理的功能。即，基于視線方向檢測部12的視線方向檢測信息和存在于該視線方向上的注視目標(biāo)的顯示信息，執(zhí)行視線方向檢測信息的校準(zhǔn)。校準(zhǔn)的執(zhí)行時機依據(jù)來自于校準(zhǔn)控制部21的校準(zhǔn)控制信息。
例如，校準(zhǔn)部13獲得視線方向檢測部12檢測出的視線方向檢測信息。此外，校準(zhǔn)部13還從顯示控制裝置2獲得存在于視線方向檢測部12檢測出的視線方向上的注視目標(biāo)顯示信息。作為注視目標(biāo)的顯示信息，可列舉相關(guān)圖標(biāo)等的位置、尺寸信息、移動狀態(tài)等數(shù)據(jù)，使用這些信息，計算相對于視線方向檢測信息的校準(zhǔn)數(shù)據(jù)。校準(zhǔn)部13計算出的校準(zhǔn)數(shù)據(jù)被設(shè)定到視線方向檢測部12中。視線方向檢測部12使用校準(zhǔn)數(shù)據(jù)，對檢測視線方向的計算處理進(jìn)行校正。從而能夠計算被校準(zhǔn)的視線方向檢測信息。
[0026]存儲器14是用于保存校準(zhǔn)數(shù)據(jù)的計算所使用的信息的存儲部。例如，校準(zhǔn)部13將駕駛員注視規(guī)定注視目標(biāo)時的視線方向檢測信息保存到存儲器14中。此外，作為視線方向檢測部12檢測出的該注視目標(biāo)顯示信息，校準(zhǔn)部13還保存其顯示范圍、基準(zhǔn)點的位置及其移動狀態(tài)等數(shù)據(jù)。預(yù)先將這些信息作為看向同一注視目標(biāo)時的信息儲存于存儲器14中，利用校準(zhǔn)部13等對所儲存的信息進(jìn)行平均值、移動平均等規(guī)定處理，對該注視目標(biāo)計算可能的校準(zhǔn)數(shù)據(jù)并使用。
另外，如上所述，在校準(zhǔn)數(shù)據(jù)的計算中可以對儲存、保存于存儲器14中的所有信息進(jìn)行平均化等處理并使用，但也可以通過計算正態(tài)分布等，提取具有規(guī)定以上可靠性的部分信息并進(jìn)行計算。
[0027]圖3是表示圖1的視線狀態(tài)判斷部20的構(gòu)成的框圖。視線狀態(tài)判斷部20是基于視線方向檢測裝置I檢測出的視線方向檢測信息以及來自視線引導(dǎo)部22的注視目標(biāo)的顯示信息，判斷駕駛員是否正在注視視線方向上的注視目標(biāo)的判斷部。如圖3所示，其構(gòu)成具備目標(biāo)判斷部200以及注視狀態(tài)判斷部201。
[0028]目標(biāo)判斷部200基于視線方向檢測裝置I檢測出的視線方向檢測信息以及來自視線引導(dǎo)部22的注視目標(biāo)的顯示信息，判斷駕駛員的視線方向上是否有注視目標(biāo)。
例如，目標(biāo)判斷部200判斷顯示部3中駕駛員視線方向起規(guī)定范圍內(nèi)的顯示區(qū)域中是否有預(yù)先設(shè)定的作為注視目標(biāo)的圖標(biāo)等。這里，所謂規(guī)定范圍內(nèi)是指顯示部3上以視線方向檢測裝置I檢測出的視線方向為中心，例如半徑4?5cm左右的圓的范圍內(nèi)。
另外，在一次都沒有實施校準(zhǔn)的階段，視線方向的偏置誤差較大，即便駕駛員對注視目標(biāo)進(jìn)行注視，該注視目標(biāo)也可能沒有進(jìn)入駕駛員視線方向起上述規(guī)定范圍內(nèi)的顯示區(qū)域中。該情況下，目標(biāo)判斷部200可以判斷為駕駛員注視最靠近視線方向的注視目標(biāo)。此外，以駕駛員的視線方向為中心，在顯示部3上繪制的半徑為4?5cm圓的范圍內(nèi)存在多個注視目標(biāo)時，也將最靠近駕駛員視線方向的位置上所顯示的顯示物設(shè)為注視目標(biāo)。
[0029]注視狀態(tài)判斷部201基于視線方向檢測裝置I檢測出的視線方向檢測信息，判斷駕駛員對注視目標(biāo)的注視狀態(tài)。
例如，在視線方向檢測裝置I檢測出的視線方向檢測信息中基本沒有偏移的狀態(tài)下，判斷為駕駛員正在對注視目標(biāo)進(jìn)行注視。另一方面，在駕駛員的視線方向檢測信息變化較大的狀態(tài)下，判斷為駕駛員并未注視注視目標(biāo)，視線正在移動。這里，通過例如視線方向檢測信息出現(xiàn)在與注視目標(biāo)的顯示范圍相同面積的范圍內(nèi)，從而判斷為駕駛員正在對注視目標(biāo)進(jìn)行注視?；蛘撸词乖谝暰€方向檢測信息超出該面積的范圍內(nèi)的情況下，如果平均化處理后仍在該面積的范圍內(nèi)，則可以判斷為駕駛員正在對該注視目標(biāo)進(jìn)行注視。
[0030]此外，注視狀態(tài)判斷部201將視線狀態(tài)信息輸出到校準(zhǔn)控制部21及視線引導(dǎo)部22。這里，視線狀態(tài)信息是指表示駕駛員視線方向上是否有注視目標(biāo)的信息以及表示駕駛員是否正在對該注視目標(biāo)進(jìn)行注視的注視狀態(tài)相關(guān)的信息。
[0031]圖4是表示圖1的校準(zhǔn)控制部21的構(gòu)成的框圖。校準(zhǔn)控制部21生成對視線方向檢測裝置I檢測出的駕駛員的視線方向檢測信息的校準(zhǔn)處理進(jìn)行控制的校準(zhǔn)控制信息并輸出。如圖4所示，其構(gòu)成具備控制判斷部210以及控制命令輸出部211。
[0032]控制判斷部210基于視線狀態(tài)判斷部20所賦予的視線狀態(tài)信息，即有無注視目標(biāo)及注視狀態(tài)，判斷校準(zhǔn)處理的控制內(nèi)容。此外，控制判斷部210基于該判斷，對控制命令輸出部211輸出適當(dāng)?shù)男?zhǔn)控制信息。
例如，在檢測出駕駛員的視線方向上有注視目標(biāo)，且駕駛員正在對注視目標(biāo)進(jìn)行注視時，控制判斷部210判斷為應(yīng)開始對視線方向檢測裝置I實施視線方向檢測信息的校準(zhǔn)。[0033 ]收到該信息后，控制命令輸出部211向視線方向檢測裝置I輸出開始校準(zhǔn)的校準(zhǔn)控制信息。具體而言，對視線方向檢測裝置I的視線方向檢測部12賦予校準(zhǔn)數(shù)據(jù)保存開始命令。
此時，在控制命令輸出部211將校準(zhǔn)數(shù)據(jù)保存開始命令輸出到視線方向檢測裝置I時，圖1所示的視線引導(dǎo)部22輸出包括駕駛員正在注視的注視目標(biāo)位置信息在內(nèi)的注視目標(biāo)的顯示信息。由此，視線方向檢測部12擁有檢測出的駕駛員視線方向和注視目標(biāo)的位置(駕駛員視線方向的真值)。
另外，如后所述，作為控制命令輸出部211所輸出的控制命令，例如包括校準(zhǔn)數(shù)據(jù)保存開始命令、校準(zhǔn)數(shù)據(jù)停止保存命令、校準(zhǔn)數(shù)據(jù)計算命令、校準(zhǔn)數(shù)據(jù)更新命令等控制命令。
[0034]圖5是表示圖1的視線引導(dǎo)部22的構(gòu)成的框圖。視線引導(dǎo)部22使用視線狀態(tài)判斷部20判斷為駕駛員正在注視的注視目標(biāo)，進(jìn)行駕駛員的視線引導(dǎo)。如圖5所示，其構(gòu)成具備顯示配置可變部220以及目標(biāo)顯示可變部221。
[0035]顯示配置可變部220基于從視線狀態(tài)判斷部20輸入的視線狀態(tài)信息以及從顯示狀態(tài)管理部222獲取的當(dāng)前配置信息，變更顯示注視目標(biāo)的配置。
例如，在判斷為駕駛員正在注視第I注視目標(biāo)時，生成畫面配置變更信息并向顯示狀態(tài)管理部222輸出，所述畫面配置變更信息用于將接下來應(yīng)注視的第2注視目標(biāo)配置在不同于第I注視目標(biāo)的位置上。
[0036]舉例說明，第I注視目標(biāo)為操作內(nèi)容的選擇鍵，第2注視目標(biāo)為決定選擇鍵所選擇的操作內(nèi)容的確定鍵。此時，相對于第I注視目標(biāo)即選擇鍵，顯示配置可變部220將第2注視目標(biāo)即確定鍵配置在顯示部3的對角上。也就是說，顯示配置可變部220從顯示狀態(tài)管理部222中讀取第I注視目標(biāo)即選擇鍵的配置信息，作為當(dāng)前配置信息。據(jù)此，顯示配置可變部220將畫面配置變更信息輸出到顯示狀態(tài)管理部222，所述畫面配置變更信息指示將第2注視目標(biāo)即確定鍵配置在顯示部3的對角上。顯示狀態(tài)管理部222基于來自上述顯示配置可變部的畫面配置變更信息，向顯示控制部23輸出畫面控制信息。同時，顯示狀態(tài)管理部222將注視目標(biāo)的顯示信息輸出到視線狀態(tài)判斷部20和視線檢測裝置I。通過該操作，視線引導(dǎo)部22以在駕駛員注視選擇鍵后、向?qū)巧弦苿硬⒌竭_(dá)確定鍵的方式來引導(dǎo)駕駛員的視線。由此，可以在顯示部3的對角位置的2個點上，分別實施視線方向檢測信息的校準(zhǔn)。
另外，第I注視目標(biāo)即選擇鍵和第2注視目標(biāo)即確定鍵并不一定要同時繪制。例如，可以如下配置:在從顯示第I注視目標(biāo)即選擇鍵的第I畫面向顯示第2注視目標(biāo)即確定鍵的第2畫面跳轉(zhuǎn)時，第I畫面上的選擇鍵的位置與第2畫面上的確定鍵的位置互相為對角關(guān)系。
[0037]目標(biāo)顯示可變部221基于從視線狀態(tài)判斷部20輸入的視線狀態(tài)信息以及從顯示狀態(tài)管理部222獲取的當(dāng)前顯示信息，變更注視目標(biāo)的顯示形態(tài)。目標(biāo)顯示可變部221生成表示顯示形態(tài)的變更的顯示變更信息并向顯示狀態(tài)管理部222輸出，所述顯示形態(tài)是例如縮小注視目標(biāo)的縮小率和縮小時基準(zhǔn)點的位置、在畫面上移動注視目標(biāo)時其移動角度(移動方向)以及移動速度等。
[0038]這里，例如在判斷為駕駛員正在對注視目標(biāo)進(jìn)行注視時，使該注視目標(biāo)朝向基準(zhǔn)點縮小，從而引導(dǎo)駕駛員的視線，使其注視基準(zhǔn)點。由此，無論駕駛員看向注視目標(biāo)的哪個部分，都會將駕駛員的視線引導(dǎo)至基準(zhǔn)點。因而，將駕駛員真實的視線方向設(shè)為基準(zhǔn)點，執(zhí)行校準(zhǔn)，從而能夠高精度地執(zhí)行視線方向檢測信息的校準(zhǔn)。
此外，通過使被判斷為駕駛員正在注視的注視目標(biāo)向預(yù)先設(shè)定的方向移動，從而引導(dǎo)駕駛員的視線，使其追隨注視目標(biāo)的移動。通過對表示視線檢測裝置I所檢測出的視線移動的角度信息、和根據(jù)實際移動的注視目標(biāo)的移動信息所獲得的真實角度信息進(jìn)行比較，能夠針對視線變化的角度執(zhí)行校準(zhǔn)。
另外，顯示狀態(tài)管理部222接收上述畫面配置變更信息或顯示變更信息，并基于這些信息，生成畫面控制信息，供應(yīng)給顯示控制部23。同時，顯示狀態(tài)管理部222向視線狀態(tài)判斷部20和視線檢測裝置I輸出注視目標(biāo)的顯示信息。
[0039]圖6是表示圖1的顯示控制部23的構(gòu)成的框圖。顯示控制部23是用于控制顯示部3的顯示的顯示控制部。此外，顯示控制部23根據(jù)從視線引導(dǎo)部22輸入的畫面控制信息，生成顯示控制信息并供應(yīng)給顯示部3，從而在顯示部3中引導(dǎo)駕駛員的視線。如圖6所示，其構(gòu)成具備畫面控制信息處理部230以及顯示輸出部231。
[0040]畫面控制信息處理部230基于從視線引導(dǎo)部22輸入的畫面控制信息，生成相關(guān)顯示的顯示信息并向顯示輸出部231輸出。
顯示輸出部231基于從畫面控制信息處理部230輸入的顯示信息，生成顯示控制信息并輸出到顯示部3。由此，顯示部3基于畫面控制信息處理部230生成的顯示信息，進(jìn)行引導(dǎo)駕駛員視線的顯示。
[0041]通過例如由微型計算機執(zhí)行記錄有本實施方式I中特有的處理的程序，視線狀態(tài)判斷部20、校準(zhǔn)控制部21、視線引導(dǎo)部22以及顯示控制部23能夠作為硬件和軟件聯(lián)動的具體手段而得以實現(xiàn)。另外，上述程序可以記錄到例如與微型計算機電連接的R0M(Read OnlyMemory，只讀存儲器)中。此外，作為暫時存儲微型計算機實施的各種計算結(jié)果的存儲裝置，可以使用與微型計算機電連接的RAM(Randam Access Memory，隨機存取存儲器)。
[0042]接下來，針對動作進(jìn)行說明。
圖7是表示本發(fā)明實施方式I所涉及的顯示控制裝置2的動作的流程圖，例示了對圖1所示的視線方向檢測裝置I檢測出的駕駛員視線方向檢測信息進(jìn)行校準(zhǔn)的示例。這里，圖7的流程圖在鑰匙接通(key on)時開始動作。
此外，作為預(yù)處理，對圖1所示視線方向檢測系統(tǒng)的各構(gòu)成通電后，分別在視線方向檢測裝置1、顯示控制裝置2以及顯示部3中執(zhí)行必要的初始化處理。在執(zhí)行該初始化處理時，視線方向檢測裝置I的校準(zhǔn)部13可以讀出已登錄到存儲器14中的校準(zhǔn)數(shù)據(jù)，并設(shè)定到視線方向檢測部12中。
[0043]初始化處理完成后，視線方向檢測裝置I開始檢測駕駛員的視線方向，并將該視線方向檢測信息依次向顯示控制裝置2輸出。
顯示控制裝置2的視線狀態(tài)判斷部20基于從視線方向檢測裝置I輸入的視線方向檢測信息以及由視線引導(dǎo)部22賦予的注視目標(biāo)的顯示信息，判斷駕駛員視線方向附近的顯示部3的顯示區(qū)域中是否有注視目標(biāo)，且判斷是否處于駕駛員正在對注視目標(biāo)進(jìn)行注視的注視狀態(tài)(步驟STl)。
具體而言，視線狀態(tài)判斷部20的目標(biāo)判斷部200基于視線方向檢測裝置I檢測出的視線方向檢測信息以及從視線引導(dǎo)部22輸入的注視目標(biāo)的顯示信息，來對顯示部3中當(dāng)前顯示的注視目標(biāo)中是否有正被駕駛員注視的注視目標(biāo)進(jìn)行判斷。
所謂在駕駛員視線方向附近的顯示部3的顯示區(qū)域中有注視目標(biāo)，例如可如上述那樣通過在以駕駛員的視線方向為中心、在顯示部3上繪制的半徑為4?5cm圓的范圍內(nèi)存在有注視目標(biāo)來進(jìn)行判斷。但是，在一次都沒有對視線方向檢測裝置I進(jìn)行校準(zhǔn)的情況下，將最靠近駕駛員視線方向的位置上所顯示的顯示物設(shè)為注視目標(biāo)。此外，即使以駕駛員的視線方向為中心、在顯示部3上繪制的半徑為4?5cm圓的范圍內(nèi)存在多個注視目標(biāo)時，也將最靠近駕駛員視線方向的位置上所顯示的顯示物設(shè)為注視目標(biāo)。
所謂駕駛員正在對注視目標(biāo)進(jìn)行注視，例如可通過在經(jīng)過規(guī)定時間(例如0.5秒)的期間內(nèi)、駕駛員的視線檢測信息的偏移在規(guī)定范圍以內(nèi)(例如，與注視目標(biāo)顯示面積大致相同面積的范圍內(nèi))來進(jìn)行判斷為?；蛘咄ㄟ^規(guī)定時間內(nèi)視線移動量的平均值在該面積范圍內(nèi)來進(jìn)行判斷。
[0044]當(dāng)駕駛員的視線方向附近沒有注視目標(biāo)或者并未明顯注視位于視線方向附近的注視目標(biāo)時(步驟STl:否)，返回步驟STl的處理，重復(fù)上述判斷。
另一方面，當(dāng)駕駛員的視線方向附近有注視目標(biāo)，并且駕駛員正在對注視目標(biāo)時進(jìn)行注視(步驟STl:是)，視線狀態(tài)判斷部20向視線引導(dǎo)部22輸出關(guān)于駕駛員正在注視的注視目標(biāo)存在或不存在的信息(有注視目標(biāo)時，其識別編號)及其注視狀態(tài)。
[0045]視線引導(dǎo)部22基于被判斷為駕駛員正在注視的注視目標(biāo)，生成指示駕駛員視線引導(dǎo)的畫面控制信息，并向顯示控制部23輸出(步驟ST2)。然后，顯示控制部23依據(jù)從視線引導(dǎo)部22輸入的畫面控制信息，向顯示部3輸出顯示控制信號，所述顯示控制信號用于使顯示部3進(jìn)行引導(dǎo)駕駛員的視線的顯示(步驟ST3)。
以下，分別對目標(biāo)顯示可變部221的動作和顯示配置可變部220的動作進(jìn)行說明。 首先，視線引導(dǎo)部22的目標(biāo)顯示可變部221基于注視目標(biāo)的注視狀態(tài)，生成指示變更注視目標(biāo)的顯示形態(tài)的指示信息。
例如，基于從視線狀態(tài)判斷部20所獲得的視線狀態(tài)信息，根據(jù)被判斷為駕駛員正在注視的注視目標(biāo)的識別編號，來確定該注視目標(biāo)。此外，目標(biāo)顯示可變部221具有以下功能:SP，在基于所確定的注視目標(biāo)的當(dāng)前顯示信息而檢測到該注視目標(biāo)尚未被縮小時，生成顯示變更信息以使得該注視目標(biāo)朝向預(yù)先設(shè)定的基準(zhǔn)點縮小的方式進(jìn)行顯示?；蛘?，目標(biāo)顯示可變部221具有以下功能:即，基于所確定的注視目標(biāo)的當(dāng)前顯示信息，生成使該注視目標(biāo)在顯示部3上移動的顯示變更信息。顯示狀態(tài)管理部222基于這些顯示變更信息，生成畫面控制信息，并向顯示控制部23輸出。此處所確定的注視目標(biāo)相關(guān)的畫面控制信息例如是縮小注視目標(biāo)的縮小率、縮小時基準(zhǔn)點的位置或縮小的速度等信息，或者表示在畫面上移動相關(guān)該目標(biāo)的移動角度(移動方向)以及移動速度等的信息。顯示控制部23的畫面控制信息處理部230基于從視線引導(dǎo)部22輸入的畫面控制信息，生成顯示信息并向顯示輸出部231輸出，所述顯示信息使顯示部3顯示依據(jù)畫面控制信息的內(nèi)容。顯示輸出部231接收該顯示信息，生成顯示控制信息并朝向顯示部3輸出。然后，將顯示部3中的注視目標(biāo)變化為用于引導(dǎo)駕駛員視線的顯示形態(tài)。關(guān)于該顯示的詳細(xì)內(nèi)容，使用圖8、圖10及圖11，在后文中闡述。
[0046]此外，視線引導(dǎo)部22的顯示配置可變部220基于被判斷為駕駛員正在注視的注視目標(biāo)的識別編號以及注視狀態(tài)，對于繼該注視目標(biāo)之后應(yīng)注視的注視目標(biāo)，變更其在顯示部3中的配置。
例如，根據(jù)該注視目標(biāo)的識別編號判斷注視目標(biāo)為預(yù)先設(shè)定的種類的顯示物，例如用于選擇功能的操作內(nèi)容相關(guān)的選擇鍵時，將該注視目標(biāo)設(shè)為第I注視目標(biāo)。然后，作為接下來應(yīng)注視的注視目標(biāo)，將決定操作內(nèi)容的確定鍵設(shè)為第2注視目標(biāo)。此時，顯示配置可變部220具有如下功能:從顯示狀態(tài)管理部222獲得當(dāng)前顯示信息，據(jù)此生成畫面配置變更信息并輸出到顯示狀態(tài)管理部222，所述畫面配置變更信息用于將第2注視目標(biāo)配置在不同于第I注視目標(biāo)的位置上。顯示狀態(tài)管理部222基于畫面配置變更信息，生成畫面控制信息，并向顯示控制部23輸出。
顯示控制部23的畫面控制信息處理部230基于從視線引導(dǎo)部22輸入的畫面控制信息，生成顯示信息并向顯示輸出部231輸出，所述顯示信息使顯示部3顯示依據(jù)畫面控制信息的內(nèi)容。顯示輸出部231接收該顯示信息，生成顯示控制信息并朝向顯示部3輸出。關(guān)于該顯示的詳細(xì)內(nèi)容，使用圖9及圖12，在后文中闡述。
[0047]視線引導(dǎo)部22將包括注視目標(biāo)位置在內(nèi)的注視目標(biāo)的顯示信息輸出到視線狀態(tài)判斷部20，并向視線方向檢測裝置I輸出(步驟ST4)。借此，視線檢測裝置I具有視線方向檢測信息和真實的視線方向即注視目標(biāo)的顯示信息。視線方向檢測裝置I對兩者進(jìn)行比較，從而能夠執(zhí)行校準(zhǔn)的計算，用于使視線方向檢測信息與真實的視線方向一致。
[0048]校準(zhǔn)控制部21向視線檢測裝置I輸出校準(zhǔn)控制信號(步驟ST5)。例如，在判斷為駕駛員正在對注視目標(biāo)進(jìn)行注視(步驟STl)，并利用顯示部3進(jìn)行視線引導(dǎo)的顯示后(步驟ST2、步驟ST3)，校準(zhǔn)控制部21對視線方向檢測裝置I輸出校準(zhǔn)數(shù)據(jù)保存開始命令，用于指示開始測定校準(zhǔn)數(shù)據(jù)并保存所測定的校準(zhǔn)數(shù)據(jù)。這里，校準(zhǔn)數(shù)據(jù)是用于執(zhí)行視線方向檢測信息的校準(zhǔn)所需要的信息，例如與視線方向檢測信息和駕駛員真實的視線方向之間的偏差相關(guān)的信息。 由此，視線方向檢測裝置I例如以I秒鐘30次(30Hz)的頻率測定校準(zhǔn)數(shù)據(jù)，并將其保存到存儲器14中。另外，關(guān)于保存于存儲器14中的樣本數(shù)，各基準(zhǔn)點有30個左右即充分夠用。也就是說，作為判斷為駕駛員正在注視的條件，即，判斷為在0.5秒的期間內(nèi)視線沒有發(fā)生偏移之后，如果再有I秒鐘左右，該基準(zhǔn)點的校準(zhǔn)便可以結(jié)束。因此，校準(zhǔn)控制部21可以在輸出上述校準(zhǔn)數(shù)據(jù)保存開始命令后，經(jīng)過規(guī)定時間，例如I?2秒鐘后，輸出校準(zhǔn)數(shù)據(jù)保存停止命令即可。由此，停止向存儲器14保存校準(zhǔn)數(shù)據(jù)。
[0049]收集了校準(zhǔn)數(shù)據(jù)的樣本后，校準(zhǔn)部13便可以計算具有可靠性的校準(zhǔn)數(shù)據(jù)。因而，校準(zhǔn)控制部21在輸出了校準(zhǔn)數(shù)據(jù)保存停止命令之后，對視線方向檢測裝置I輸出校準(zhǔn)數(shù)據(jù)計算命令。據(jù)此，校準(zhǔn)部13計算校準(zhǔn)數(shù)據(jù)。然后，所獲得的校準(zhǔn)數(shù)據(jù)被傳輸?shù)酱鎯ζ?4中進(jìn)行存儲或信息更新。因此，繼校準(zhǔn)數(shù)據(jù)計算命令之后，校準(zhǔn)控制部21對視線方向檢測裝置I輸出校準(zhǔn)數(shù)據(jù)更新命令(步驟ST5)。
如上所述，步驟ST5中所述的控制命令包括校準(zhǔn)數(shù)據(jù)保存開始命令、校準(zhǔn)數(shù)據(jù)保存停止命令、校準(zhǔn)數(shù)據(jù)計算命令、校準(zhǔn)數(shù)據(jù)更新命令等控制命令。
[0050]此外，如上所述在輸出校準(zhǔn)保存開始命令起，經(jīng)過I?2秒鐘的規(guī)定時間之后，輸出校準(zhǔn)數(shù)據(jù)保存停止命令。然而，在判斷為在經(jīng)過規(guī)定時間前駕駛員就不再對注視目標(biāo)進(jìn)行注視時，應(yīng)快速地輸出校準(zhǔn)數(shù)據(jù)保存停止命令。其原因在于，在駕駛員未對注視目標(biāo)進(jìn)行注視的狀態(tài)下，無法實施針對該注視目標(biāo)的視線檢測信息的校準(zhǔn)。
[0051]或者，也可以通過駕駛員按下規(guī)定開關(guān)從而輸出校準(zhǔn)保存開始命令，通過再次按下開關(guān)從而輸出校準(zhǔn)數(shù)據(jù)保存停止命令。其原因在于，要根據(jù)駕駛員的意愿實施校準(zhǔn)，因而在此期間駕駛員可能正在對注視目標(biāo)進(jìn)行注視。
[0052]進(jìn)而，對于駕駛員注視操作鍵后、按下決定該操作內(nèi)容的確定鍵來決定該操作內(nèi)容的裝置，則也可以在判斷為駕駛員已從對于操作鍵的注視起移動視線而正在注視確定鍵時，輸出校準(zhǔn)保存開始命令，在駕駛員按下確定鍵時，輸出校準(zhǔn)數(shù)據(jù)保存停止命令。其原因在于，在駕駛員要按下確定鍵時，推測為從判斷為正在注視確定鍵起到按下確定鍵為止，經(jīng)過了 I?2秒鐘左右的足夠的規(guī)定時間。
[0053]視線方向檢測部12使用通過上述處理獲得的校準(zhǔn)數(shù)據(jù)，對檢測視線方向的計算處理進(jìn)行校正。由此，能夠?qū)Ω鱾€駕駛員實施經(jīng)校準(zhǔn)的視線方向檢測。
[0054]另外，即便為同一駕駛員，實施校準(zhǔn)后隨著時間的流逝，如果環(huán)境發(fā)生變化，有可能會再次產(chǎn)生檢測誤差。因此，最好定期或者按規(guī)定的觸發(fā)方式(例如乘車時等)執(zhí)行校準(zhǔn)處理。在本實施方式I中，以鑰匙接通作為觸發(fā)方式，執(zhí)行圖7的流程圖，因此，每次鑰匙接通時都執(zhí)行視線方向檢測信息的校準(zhǔn)。另外，執(zhí)行校準(zhǔn)的觸發(fā)方式并不限定于鑰匙接通，本領(lǐng)域技術(shù)人員可以設(shè)計各種形態(tài)。
[0055]接下來，列舉具體例，對視線引導(dǎo)處理進(jìn)行說明。
圖8是表示縮小注視目標(biāo)并引導(dǎo)視線的顯示畫面的示例圖。圖8(a)表示顯示部3是配置在駕駛座的前方儀表板(以下，簡稱為儀表板)的儀表板顯示屏的情況。此外，圖8(b)表示顯示部3是對駕駛座前方的前窗玻璃或設(shè)置于方向盤和前窗玻璃之間的投影板等投影顯示信息的HUD的情況。視線方向檢測裝置I設(shè)置于顯示部3附近的位置處，相對于駕駛員照射紅外線發(fā)光二極管的光。
[0056]在本實施方式中，如圖8(a)及圖8(C)所示，將顯示部3顯示于顯示畫面3a上的顯示物設(shè)為駕駛員應(yīng)注視的注視目標(biāo)4。例如，將預(yù)先設(shè)定的圖標(biāo)圖像、按鈕圖像、標(biāo)記等設(shè)為注視目標(biāo)4，將用于識別這些注視目標(biāo)的識別編號設(shè)定到視線引導(dǎo)部22中。
另外，注視目標(biāo)4也可以將顯示于顯示部3中的任意顯示物設(shè)為注視目標(biāo)，或者將預(yù)先設(shè)定的顯示物設(shè)為注視目標(biāo)。此外，如圖8(a)或(b)中的虛線所示，可以將注視目標(biāo)4設(shè)定在顯示部3的中央部。
[0057]對于顯示于顯示畫面3a中的注視目標(biāo)4中，利用視線狀態(tài)判斷部20判斷為駕駛員正在注視某一注視目標(biāo)4時，視線引導(dǎo)部22的目標(biāo)顯示可變部221生成顯示變更信息，使該注視目標(biāo)4朝向基準(zhǔn)點縮小。該顯示變更信息是縮小注視目標(biāo)4時的縮小率、縮小時基準(zhǔn)點的位置或縮小的速度等信息。
[0058]顯示狀態(tài)管理部222基于顯示變更信息和當(dāng)前顯示信息，生成畫面控制信息，并輸出至顯示控制部23。顯示控制部23接收畫面控制信息，生成顯示控制信息并向顯示部3輸出。由此，若為圖8(a)的儀表板顯示屏，則左上角的注視目標(biāo)4朝向其中心逐漸縮小并顯示。同樣，若為圖8(b)的HUD，則右上角的注視目標(biāo)4朝向其中心逐漸縮小并顯示。這里，注視目標(biāo)4的縮小顯示如圖8(c)所示。其中一個是以注視目標(biāo)4的中心為基準(zhǔn)點，朝向該基準(zhǔn)點逐漸縮小并顯示?；蛘弋?dāng)注視目標(biāo)為矩形時，以其4個角中的任一點為基準(zhǔn)點，朝向該基準(zhǔn)點逐漸縮小并顯示。也就是說，注視目標(biāo)的縮小也可以不朝向注視目標(biāo)的中心進(jìn)行縮小。由此，駕駛員對注視目標(biāo)4進(jìn)行注視，然后注視目標(biāo)的顯示尺寸縮小，通過這種顯示變化，將駕駛員的視線朝向基準(zhǔn)點引導(dǎo)。
因此，駕駛員對注視目標(biāo)4的基準(zhǔn)點進(jìn)行注視，該基準(zhǔn)點的視線方向檢測信息的校準(zhǔn)精度提高。
[0059]圖9是表示將注視目標(biāo)和接下來應(yīng)注視的目標(biāo)配置在不同位置處來引導(dǎo)視線的顯示畫面的示例圖，圖9(a)及圖9(b)表示顯示部3為儀表板顯示屏的情況。在圖9(a)及(b)中，顯示畫面的左側(cè)排列有作為第I注視目標(biāo)的多個選擇鍵。另一方面，在畫面右側(cè)的上下角分別配置有作為第2注視目標(biāo)的確定鍵4b和取消鍵4c。這里，選擇鍵是指如上所述表示功能內(nèi)容的鍵，確定鍵是決定利用選擇鍵所選擇的功能內(nèi)容的鍵。此外，取消鍵是取消利用選擇鍵所選擇的功能內(nèi)容的鍵，是取消暫時所選擇的鍵而改為選擇其他選擇鍵的鍵。
這里，駕駛員注視左上角的選擇鍵4a作為第I注視目標(biāo)時，逐漸縮小選擇鍵4a并顯示，在該狀態(tài)下獲取關(guān)于選擇鍵4a的校準(zhǔn)數(shù)據(jù)。該操作可通過以下步驟執(zhí)行，S卩:在圖7的流程圖中，判斷為駕駛員正在注視左上角的選擇鍵4a的狀態(tài)(步驟STl)，通過步驟ST2、3使選擇鍵4a進(jìn)行縮小顯示，在步驟ST4中輸出作為注視目標(biāo)的選擇鍵4a的顯示信息，在步驟ST5中輸出校準(zhǔn)控制信號。
接著，駕駛員注視確定鍵4b作為第2注視目標(biāo)時，同樣地逐漸縮小確定鍵4b并顯示，在該狀態(tài)下獲取關(guān)于確定鍵4b的校準(zhǔn)數(shù)據(jù)。此時，同樣執(zhí)行上述圖7的流程圖處理。由此，在圖9(b)中，如實線a所示駕駛員視線移動時，可以在顯示部3的對角位置的2個點上執(zhí)行視線方向檢測信息的校準(zhǔn)。此外，駕駛員注視取消鍵4c作為第2注視目標(biāo)時，同樣地逐漸縮小取消鍵4c并顯示，在該狀態(tài)下獲取關(guān)于取消鍵4c的校準(zhǔn)數(shù)據(jù)。由此，在圖9(b)中，如虛線b所示那樣駕駛員視線移動時，可以在顯示部3的一條邊的2個點上執(zhí)行視線方向檢測信息的校準(zhǔn)。
[0060]另外，駕駛員注視哪一個選擇鍵4作為第I注視目標(biāo)并不明確。
然而，在圖9的示例中，當(dāng)選擇顯示畫面左下角的選擇鍵4時，若接下來注視確定鍵4b，則可以在顯示部3的一條邊的2個點上實施視線方向檢測信息的校準(zhǔn)。同樣，當(dāng)中止取消鍵4c而非確定鍵4b時，可以在顯示部3的對角位置的2個點上執(zhí)行視線方向檢測信息的校準(zhǔn)。
[0061]或者，由于在注視選擇鍵之后，接下來駕駛員注視確定鍵4b的可能性較高，因此，在選擇了顯示畫面左下角的選擇鍵4時，也可以變換確定鍵4b和取消鍵4c的顯示。為了提高視線方向檢測信息的校準(zhǔn)精度，相較于顯示部3的一條邊的2個點，優(yōu)選首先在顯示部3的對角位置的2個點上獲取校準(zhǔn)數(shù)據(jù)。因此，根據(jù)駕駛員所注視的選擇鍵，變更確定鍵或者取消鍵等的位置，從而能夠提高視線方向檢測信息的校準(zhǔn)精度。此時，在圖7的流程圖中，在縮小顯示左下角的選擇鍵4a之后，通過步驟ST2、3變換確定鍵4b和取消鍵4c的配置?？梢酝ㄟ^視線引導(dǎo)部22的顯示配置可變部220執(zhí)行該操作。之后，當(dāng)判斷為駕駛員注視移動至右上角而顯示的確定鍵時，通過圖7的流程圖，對移動至右上角而顯示的確定鍵進(jìn)行縮小顯示，獲取校準(zhǔn)數(shù)據(jù)。
[0062]在本實施方式中，要最終決定利用選擇鍵4a所選擇的操作時，通常是通過操作確定鍵4b，將被判斷為駕駛員正在注視的注視目標(biāo)為選擇鍵(第I注視目標(biāo))4a，以及接下來應(yīng)注視的確定鍵(第2注視目標(biāo)4b)配置在顯示部3的顯示畫面3a中不同的位置上。
由此，當(dāng)駕駛員注視選擇鍵4a時，可以縮小選擇鍵4a的顯示尺寸并將視線引導(dǎo)向基準(zhǔn)點，將視線由該注視狀態(tài)向確定鍵4b引導(dǎo)。
[0063]具體而言，視線引導(dǎo)部22的目標(biāo)顯示可變部221基于注視目標(biāo)的注視狀態(tài)，生成縮小注視目標(biāo)的顯示變更信息。
顯示管理部222基于當(dāng)前顯示狀態(tài)和顯示變更信息，輸出畫面控制信息。該畫面控制信息用于指示由當(dāng)前顯示狀態(tài)向基準(zhǔn)點縮小的顯示形態(tài)。其結(jié)果為，注視目標(biāo)向基準(zhǔn)點逐漸縮小，直至變?yōu)橐?guī)定的大小。另外，規(guī)定的大小是指為獲取校準(zhǔn)數(shù)據(jù)而足夠小的狀態(tài)，例如以5_到Icm左右為一邊長的矩形，或者以該尺寸為直徑的圓或其他形狀。
[0064]如上所述，通過將選擇鍵4a和確定鍵4b配置在顯示畫面3a中互不相同的位置上，從而可以自然地將駕駛員的視線從選擇鍵4a引導(dǎo)向確定鍵4b。
因此，能夠?qū)崿F(xiàn)校準(zhǔn)時間的縮短和校準(zhǔn)精度的提高。
[0065]此外，以上所示的是將注視目標(biāo)設(shè)為選擇鍵4a，將接下來應(yīng)注視的注視目標(biāo)設(shè)為確定鍵4b的情況，但并不限定于此。
例如，也可以不依據(jù)操作者，而根據(jù)收集到的圖標(biāo)操作履歷，計算駕駛員繼首先注視的圖標(biāo)(第I注視目標(biāo))之后進(jìn)行選擇的選擇率，將該選擇率超過閾值的圖標(biāo)設(shè)為第2注視目標(biāo)。
[ΟΟ??]圖10是表示移動注視目標(biāo)并引導(dǎo)視線的顯示畫面的示例圖，圖10(a)到圖10(d)表示顯示部3為儀表板顯示屏的情況。
在本實施方式中，如圖10(a)所示，當(dāng)駕駛員正在對注視目標(biāo)時進(jìn)行注視，如圖10(b)所示，使注視目標(biāo)4向預(yù)先設(shè)定的方向Cl移動。
[0067]具體而言，在根據(jù)視線狀態(tài)信息判斷為駕駛員正在對注視目標(biāo)進(jìn)行注視時，目標(biāo)顯示可變部221生成移動注視目標(biāo)的顯示變更信息。顯示變更信息是移動注視目標(biāo)時的移動角度(方向Cl)及移動速度等相關(guān)的信息。目標(biāo)顯示可變部221從顯示狀態(tài)管理部222獲取當(dāng)前顯示信息，將顯示變更信息輸出到顯示狀態(tài)管理部222，從而如圖10(b)所示，在顯示畫面3a中使注視目標(biāo)4例如從左側(cè)朝向右側(cè)移動。 如此一來，通過使駕駛員注視的注視目標(biāo)移動這一顯示變化，向預(yù)先設(shè)定的方向Cl引導(dǎo)駕駛員的視線。因此，可以引導(dǎo)視線，對移動前和移動后的注視目標(biāo)獲取校準(zhǔn)數(shù)據(jù)，校準(zhǔn)精度提高。
也就是說，在本實施方式I中，并不一定需要縮小注視目標(biāo)。另外，要使注視目標(biāo)由圖10(a)移動為圖10(b)的狀態(tài)，可以通過執(zhí)行上述圖7的流程圖而實現(xiàn)。
[0068]再者，作為使之移動的注視目標(biāo)4，例如可列舉圖10(c)所示的已開封的郵件圖標(biāo)等。要刪除已開封的郵件時，如圖10(d)所示，如將郵件圖標(biāo)丟入垃圾箱圖標(biāo)的示意圖所示，將作為注視目標(biāo)4的郵件圖標(biāo)向垃圾箱圖標(biāo)4d的方向c2移動。
由此，將駕駛員的視線從最初注視郵件圖標(biāo)的位置引導(dǎo)至垃圾箱圖標(biāo)4d的位置。此時，如果將郵件圖標(biāo)和垃圾箱圖標(biāo)4d配置在對角位置上，則與選擇鍵及確定鍵的情況一樣，可以獲取校準(zhǔn)數(shù)據(jù)。
[0069]圖11是表示移動注視目標(biāo)并引導(dǎo)視線的顯示畫面的其他示例圖，圖11(a)到圖11(C)表示顯示部3為儀表板顯示屏的情況。
顯示區(qū)域d是顯示部3的顯示畫面3a的位置(顯示區(qū)域)中，視線方向檢測信息的校準(zhǔn)精度最差的位置。這里，所謂校準(zhǔn)精度最差是指一次都未執(zhí)行校準(zhǔn)的位置，或者過去執(zhí)行過校準(zhǔn)的位置中精度最差的位置。在本實施方式中，使注視目標(biāo)移動至校準(zhǔn)精度最差的顯示區(qū)域d并使其為縮小狀態(tài)。另外，如圖1中虛線所例示，過去的校準(zhǔn)中視線方向檢測信息的校準(zhǔn)精度最差的位置從視線方向檢測裝置I中獲得。例如，可以將校準(zhǔn)精度相關(guān)的校準(zhǔn)精度信息導(dǎo)入視線引導(dǎo)部22中。另外，關(guān)于其他虛線部分，此處并不需要，故于后文進(jìn)行說明。
[0070]具體而言，視線引導(dǎo)部22的目標(biāo)顯示可變部221基于從視線檢測裝置I獲得的校準(zhǔn)精度最差的位置相關(guān)的信息、以及從顯示狀態(tài)管理部222獲得的當(dāng)前顯示信息，生成向顯示區(qū)域d移動注視目標(biāo)4的顯示變更信息。此外，目標(biāo)顯示可變部221基于從顯示狀態(tài)管理部獲得的當(dāng)前顯示信息，生成逐漸縮小注視目標(biāo)的顯示變更信息。將兼顧這兩個操作的顯示變更信息賦予給顯示狀態(tài)管理部222。顯示狀態(tài)管理部222基于該顯示變更信息，生成一邊縮小注視目標(biāo)4 一邊向顯示區(qū)域d移動的畫面控制信息。由此，如圖11(b)所示，一邊縮小注視目標(biāo)4 一邊向顯示區(qū)域d移動。通過該操作，在顯示區(qū)域d執(zhí)行校準(zhǔn)，從而能夠提高顯示區(qū)域d的校準(zhǔn)精度。
另外，除了如圖11(b)所示一邊縮小注視目標(biāo)一邊移動使其到達(dá)顯示區(qū)域d的情況以夕卜，也可以如圖11(c)所示，在注視目標(biāo)到達(dá)顯示區(qū)域d后再使其縮小?；蛘卟⒉灰欢ㄐ枰s小顯示注視目標(biāo)，可以省略此操作。
[0071 ]另外，上述記載的是使注視目標(biāo)移動至包括校準(zhǔn)精度最差的位置在內(nèi)的顯示區(qū)域d的示例。然而，并不一定要移動至預(yù)先設(shè)定的基準(zhǔn)點，原則上優(yōu)先移動至顯示區(qū)域d即可。其原因在于，例如，即使存在校準(zhǔn)精度良好、但在鑰匙接通后一次都未實施視線方向檢測信息的校準(zhǔn)的顯示區(qū)域，則可以首先考慮以該顯示區(qū)域為優(yōu)先。
[0072]圖12是表示畫面跳轉(zhuǎn)時視線引導(dǎo)的顯示畫面的示例圖，圖12(a)到圖12(c)表示顯示部3為儀表板顯示屏的情況。
在圖12(a)中，駕駛員正在注視并縮小的圖標(biāo)(第I注視目標(biāo))A與接下來應(yīng)注視的圖標(biāo)(第2注視目標(biāo))4-1相關(guān)聯(lián)。例如，也可以不依賴于操作者，而根據(jù)收集到的圖標(biāo)操作履歷，求取駕駛員繼最先注視的圖標(biāo)(第I注視目標(biāo))之后接下來選擇的圖標(biāo)操作的選擇率，將該選擇率超過閾值的操作所對應(yīng)的圖標(biāo)設(shè)為第2注視目標(biāo)，從而執(zhí)行上述關(guān)聯(lián)。另外，對于基于圖標(biāo)操作履歷的關(guān)聯(lián)，本領(lǐng)域技術(shù)人員很容易想到，因此此處省略其說明。
[0073]在圖12的動作中，在根據(jù)注視目標(biāo)的識別編號判斷注視目標(biāo)為第I注視目標(biāo)時，視線引導(dǎo)部22的顯示配置可變部220確定接下來應(yīng)注視的第2注視目標(biāo)。這里，接下來應(yīng)注視的第2注視目標(biāo)是選擇率最高的注視目標(biāo)4-1。
然后，顯示配置可變部220生成畫面配置變更信息并輸出，所述畫面配置變更信息是在不同于顯示第I注視目標(biāo)的顯示畫面3a_l的顯示畫面中，即從顯示畫面3a_l跳轉(zhuǎn)并顯示的顯示畫面3a_2中，將第2注視目標(biāo)配置于第I注視目標(biāo)的對角位置上。
顯示控制部23依據(jù)該畫面配置變更信息，相對于顯示于顯示畫面3a-l中的第I注視目標(biāo)即注視目標(biāo)A，將顯示畫面3a-2中的第2注視目標(biāo)即注視目標(biāo)4-1配置在對角位置上。
[0074]在本實施方式中，從顯示被判斷為駕駛員正在注視的第I注視目標(biāo)的顯示畫面(第I顯示畫面)3a-l向顯示第2注視目標(biāo)的顯示畫面(第2顯示畫面)3a-2跳轉(zhuǎn)。此時，第I及第2注視目標(biāo)分別配置在顯示畫面3a_l和顯示畫面3a_2中的對角位置上。
例如，如圖12(b)所示，操作顯示畫面3a-l中的“AUD1”(音頻)按鈕后，將用于選擇接下來操作可能性較高的樂曲藝術(shù)家的“藝術(shù)家”按鈕配置在顯示畫面3a-2的對角位置上。
通過該操作，如圖12(c)所示，經(jīng)由畫面跳轉(zhuǎn)，將駕駛員的視線引導(dǎo)至對角線上，移動距離a。因此，可以縱橫二維地有效地獲取校準(zhǔn)所需要的校準(zhǔn)數(shù)據(jù)，快速地實現(xiàn)校準(zhǔn)精度的提尚O
另外，上述例示的是在第I注視目標(biāo)的對角位置上顯示第2注視目標(biāo)的示例，但并不限定于此。例如，在圖12(a)中，在判斷為對注視目標(biāo)A進(jìn)行注視后，在其后的畫面跳轉(zhuǎn)中可以將注視目標(biāo)4-1顯示于右上、左下角或畫面的中央部等任意位置上。關(guān)于該任意顯示位置，也可以結(jié)合校準(zhǔn)精度或一次都未實施校準(zhǔn)的基準(zhǔn)點等的狀況。
[0075]另外，上述校準(zhǔn)處理是在顯示部3中進(jìn)行引導(dǎo)駕駛員的視線的顯示，在始終進(jìn)行引導(dǎo)該駕駛員視線的顯示的情況下，駕駛員可能會有異樣感。
因此，當(dāng)視線方向檢測信息的校準(zhǔn)精度超過預(yù)先設(shè)定的閾值A(chǔ)時，可以判斷為視線方向檢測信息的精度足夠，從而解除視線引導(dǎo)模式。這里，所謂預(yù)先設(shè)定的閾值A(chǔ)，是在基于視線方向檢測信息操作裝置方面，判斷為可以無較大障礙地進(jìn)行操作的適當(dāng)值。
[0076]圖13是表示視線引導(dǎo)模式的解除處理的流程圖。
圖13的流程圖以鑰匙開關(guān)的接通為觸發(fā)方式進(jìn)行啟動，與圖7所示的流程圖無直接關(guān)系地執(zhí)行相關(guān)操作。該流程圖的控制思路為，鑰匙接通起的規(guī)定時間的期間中例如5?10分鐘的期間中執(zhí)行引導(dǎo)駕駛員視線的顯示。然后，在經(jīng)過5?10分鐘后的時刻、判斷為對以視線方向檢測裝置I的視線方向檢測信息的精度為對象的裝置進(jìn)行操作方面具有足夠的精度的情況下，結(jié)束引導(dǎo)駕駛員視線的顯示。另一方面，在對以視線方向檢測裝置I的視線方向檢測信息的精度為對象的裝置進(jìn)行操作方面不具有足夠的精度的情況下，進(jìn)一步在5?10分鐘的期間中執(zhí)行引導(dǎo)駕駛員視線的顯示，并判斷是否具有上述足夠的精度。由此，對超出需要地執(zhí)行引導(dǎo)駕駛員視線的顯示的情況加以抑制。
以下，依據(jù)圖13的流程圖進(jìn)行說明。
首先，校準(zhǔn)控制部21先以鑰匙接通為觸發(fā)方式，啟動定時器，判斷定時器是否經(jīng)過了規(guī)定時間，例如10分鐘(步驟ST11)。這里，如果沒有經(jīng)過規(guī)定時間(步驟STll:否)，則重復(fù)步驟STl I的判斷。
[0077]經(jīng)過了規(guī)定時間的情況下(步驟STll:是)，校準(zhǔn)控制部21判斷在鑰匙接通到經(jīng)過規(guī)定時間為止的期間內(nèi)通過處理而獲得的校準(zhǔn)精度是否超過預(yù)先設(shè)定的閾值A(chǔ)(步驟ST12)。這里，在上述記載中校準(zhǔn)精度信息從視線方向檢測裝置I賦予到視線引導(dǎo)部22，但該信息也可以賦予給校準(zhǔn)控制部21。作為其參考，如圖1中的虛線所示。
當(dāng)判斷為校準(zhǔn)精度超過閾值A(chǔ)時(步驟ST12:是)，校準(zhǔn)控制部21對視線方向檢測裝置I指示停止校準(zhǔn)處理，并將該判斷結(jié)果通知給視線引導(dǎo)部22。
收到該判斷結(jié)果后，視線引導(dǎo)部22解除視線引導(dǎo)模式(步驟ST13)。此時，視線引導(dǎo)部22不生成用于引導(dǎo)視線的畫面配置變更信息及顯示變更信息，顯示部3不進(jìn)行引導(dǎo)駕駛員視線的顯示。
[0078]另一方面，當(dāng)判斷為校準(zhǔn)精度在閾值A(chǔ)以下時(步驟ST12:否)，校準(zhǔn)控制部21繼續(xù)利用視線方向檢測裝置I執(zhí)行校準(zhǔn)處理。也就是說，在步驟ST15中對定時器初始化，并返回到步驟STll進(jìn)行處理，從而，于此處開始進(jìn)一步執(zhí)行引導(dǎo)駕駛員視線的顯示直至經(jīng)過規(guī)定時間。
[0079]另外，在上述實施方式I中以特定的圖標(biāo)等作為預(yù)先設(shè)定的注視目標(biāo)為例進(jìn)行了說明，但注視目標(biāo)也可以不預(yù)先設(shè)定。
也可以將駕駛員注視的任意圖標(biāo)等作為注視目標(biāo)，和上述一樣引導(dǎo)駕駛員的視線。
[0080]如上所述，根據(jù)本實施方式I，將駕駛員的視線引導(dǎo)至預(yù)先設(shè)定的方向或位置，因此，如果在該引導(dǎo)前后測定校準(zhǔn)數(shù)據(jù)，就能夠在多個基準(zhǔn)點獲得校準(zhǔn)數(shù)據(jù)。此外，通過將視線引導(dǎo)至規(guī)定方向或位置，能夠獲得關(guān)于視線移動的角度的校準(zhǔn)數(shù)據(jù)。從而能夠高精度且快速地實施視線方向檢測的校準(zhǔn)。
[0081]此外，根據(jù)本實施方式I，視線引導(dǎo)部22使被判斷為駕駛員正在注視的注視目標(biāo)朝向基準(zhǔn)點縮小，因此，能夠?qū)Ⅰ{駛員的視線向注視目標(biāo)的基準(zhǔn)點引導(dǎo)，提高各個基準(zhǔn)點的測定精度。從而能夠?qū)崿F(xiàn)校準(zhǔn)精度的提高。
[0082]再者，根據(jù)本實施方式I，視線引導(dǎo)部22將被判斷為駕駛員正在注視的第I注視目標(biāo)和接下來應(yīng)注視的第2注視目標(biāo)配置在顯示部3中的不同位置上。通過該操作，能夠?qū)Ⅰ{駛員的視線從第I注視目標(biāo)向第2注視目標(biāo)引導(dǎo)，高精度且快速地實施視線方向檢測信息的校準(zhǔn)。
[0083]進(jìn)而，根據(jù)本實施方式I，將第I及第2注視目標(biāo)配置在顯示部3的顯示畫面3a中的對角位置上。通過該操作，能夠獲得呈縱橫二維的校準(zhǔn)數(shù)據(jù)，能夠高精度且快速地實施視線方向檢測信息的校準(zhǔn)。
[0084]進(jìn)而，根據(jù)本實施方式I，在第I顯示畫面中注視第I注視目標(biāo)后，跳轉(zhuǎn)到第2顯示畫面時，將第2注視目標(biāo)配置在第I注視目標(biāo)的對角位置上。
通過該操作，能夠高精度且快速地實施視線方向檢測信息的校準(zhǔn)。
[0085]再者，根據(jù)本實施方式I，視線引導(dǎo)部22將被判斷為駕駛員正在注視的注視目標(biāo)向顯示部3的顯示畫面3a中預(yù)先設(shè)定的方向移動。
通過該操作，對于視線的移動角度也能執(zhí)行校準(zhǔn)，從而能夠高精度且快速地實施視線方向檢測信息的校準(zhǔn)。
[0086]進(jìn)而，根據(jù)本實施方式I，將注視目標(biāo)向顯示部3的顯示畫面3a中預(yù)先設(shè)定的位置移動。通過該操作，能夠高精度且快速地實施視線方向檢測信息的校準(zhǔn)。
[0087]進(jìn)而，根據(jù)本實施方式I，優(yōu)先將注視目標(biāo)移動至顯示部3的顯示畫面3a中預(yù)先設(shè)定的位置中、視線方向檢測的校準(zhǔn)精度最差的位置處。并且，優(yōu)選為縮小狀態(tài)。通過該操作，在該位置實施校準(zhǔn)，從而能夠快速地提高該位置的校準(zhǔn)精度。
[0088]再者，根據(jù)本實施方式I，校準(zhǔn)控制部21根據(jù)預(yù)先設(shè)定的條件控制校準(zhǔn)。通過這種構(gòu)成，能夠在適當(dāng)?shù)臅r刻開始和結(jié)束校準(zhǔn)。
尤其是當(dāng)該條件為駕駛員的開關(guān)操作時，能夠在駕駛員期望的時刻進(jìn)行校準(zhǔn)。
此外，作為上述時刻，使用駕駛員對注視目標(biāo)進(jìn)行注視起所經(jīng)過的時間的情況下，能夠在駕駛員無意識的狀態(tài)下進(jìn)行校準(zhǔn)測定。例如，適用于在駕駛員駕駛汽車期間進(jìn)行校準(zhǔn)的情況。
[0089]再者，根據(jù)本實施方式I，在視線引導(dǎo)部22的視線方向檢測信息的校準(zhǔn)精度超過預(yù)先設(shè)定的閾值而具有足夠高的精度時，解除視線引導(dǎo)。由此，能夠抑制始引導(dǎo)行駕駛員視線的顯示，不會讓駕駛員產(chǎn)生異樣感。
[0090]實施方式2.圖14是表示本發(fā)明實施方式2所涉及的視線方向檢測系統(tǒng)的構(gòu)成的框圖。由視線方向檢測部12檢測出的視線方向檢測信息中存在由駕駛員個體差異引起的誤差。因此，為了確保視線方向檢測信息的檢測精度，優(yōu)選對各個駕駛員執(zhí)行校準(zhǔn)。
圖14所示的視線方向檢測系統(tǒng)和實施方式I 一樣，是搭載于汽車等移動物體上檢測駕駛員的視線方向的系統(tǒng)，構(gòu)成為包括視線方向檢測裝置1、顯示控制裝置2A及顯示部3。另夕卜，在圖14中，對于與圖1相同的構(gòu)成，標(biāo)記相同標(biāo)號，省略說明。
[0091]實施方式2所涉及的顯示控制裝置2A除實施方式I的構(gòu)成外，還具備個人認(rèn)證部
24。個人認(rèn)證部24基于各個駕駛員的認(rèn)證信息進(jìn)行駕駛員的認(rèn)證。例如，作為認(rèn)證信息，包括拍攝駕駛員臉部的拍攝信息、駕駛員的生態(tài)信息、駕駛員持有的移動終端的設(shè)備信息等。
個人認(rèn)證部24將這些信息和駕駛員個人的登錄信息進(jìn)行核對，認(rèn)證是否為預(yù)先登錄的駕駛員。向校準(zhǔn)控制部21輸出個人認(rèn)證部24的認(rèn)證結(jié)果。
[0092]校準(zhǔn)控制部21對視線方向檢測裝置I指示對經(jīng)個人認(rèn)證部24認(rèn)證的駕駛員進(jìn)行校準(zhǔn)。
例如，使校準(zhǔn)部13計算經(jīng)個人認(rèn)證部24認(rèn)證的駕駛員相關(guān)的視線方向檢測信息的校準(zhǔn)數(shù)據(jù)。也就是說，將與個人相對應(yīng)的校準(zhǔn)數(shù)據(jù)保存到存儲器14中。
此外，使用保存于存儲器14中的校準(zhǔn)數(shù)據(jù)中、與經(jīng)個人認(rèn)證部24認(rèn)證的駕駛員相對應(yīng)的校準(zhǔn)數(shù)據(jù)，使視線方向檢測部12對檢測視線方向的計算處理進(jìn)行校正。
通過該操作，能夠針對經(jīng)個人認(rèn)證部24認(rèn)證的各個駕駛員實施視線方向檢測信息的校準(zhǔn)。
[0093]與上述實施方式I一樣，通過例如由微型計算機執(zhí)行記錄有本實施方式2中特有的處理的程序，視線狀態(tài)判斷部20、校準(zhǔn)控制部21、視線引導(dǎo)部22、顯示控制部23以及個人認(rèn)證部24能夠作為硬件和軟件聯(lián)動的具體手段而得以實現(xiàn)。
[0094]如上所述，根據(jù)本實施方式2，顯示控制裝置2A進(jìn)而具備進(jìn)行對象認(rèn)證的個人認(rèn)證部24。由此，校準(zhǔn)控制部21能夠使用經(jīng)個人認(rèn)證部24認(rèn)證的各個對象的校準(zhǔn)數(shù)據(jù)，按對象對視線方向檢測裝置I輸出的視線方向檢測信息執(zhí)行校準(zhǔn)。
[0095]另外，本發(fā)明可以在其發(fā)明范圍內(nèi)，對各實施方式進(jìn)行自由組合，或者對各實施方式的任意構(gòu)成要素加以改進(jìn)，或者可以在各實施方式中省略任意構(gòu)成要素。
工業(yè)上的實用性
[0096]本發(fā)明所涉及的顯示控制裝置能夠高精度且快速地實施對象視線方向檢測信息相關(guān)的校準(zhǔn)，因此，適用于例如利用駕駛員的視線方向支援駕駛的駕駛支援系統(tǒng)。
標(biāo)號說明
[0097]I視線方向檢測裝置;2、2A校準(zhǔn)控制裝置;3顯示部;3a、3a-l、3a-2、3b顯示畫面;4、4b、4c、4d、4-1?4-4注視目標(biāo);4a縮小的注視目標(biāo);5開關(guān)；1紅外線LED ； 11視線檢測用相機；12視線方向檢測部；13校正部；14存儲器;20視線狀態(tài)判斷部;21校準(zhǔn)控制部;22視線引導(dǎo)部;23顯示控制部;24個人認(rèn)證部;200目標(biāo)判斷部;201注視狀態(tài)判斷部;210控制判斷部；211控制命令輸出部;220顯示配置可變部;221目標(biāo)顯示可變部;230顯示狀態(tài)管理部;231顯不輸出部。
【主權(quán)項】
1.一種顯示控制裝置，該顯示控制裝置將顯示部所顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)，控制視線方向檢測裝置的校準(zhǔn)，其特征在于，包括: 視線狀態(tài)判斷部，該視線狀態(tài)判斷部基于所述視線方向檢測裝置所檢測出的視線方向檢測信息以及所述注視目標(biāo)的顯示信息，判斷對象是否正在注視存在于其視線方向上的所述注視目標(biāo)； 視線引導(dǎo)部，該視線引導(dǎo)部輸出所述注視目標(biāo)的顯示信息以及所述注視目標(biāo)的顯示形態(tài)相關(guān)的畫面控制信息，并在判斷為所述對象正在注視所述注視目標(biāo)時，改變所述注視目標(biāo)的顯示形態(tài)，從而引導(dǎo)所述對象的視線； 顯示控制部，該顯示控制部基于所述視線引導(dǎo)部輸出的所述畫面控制信息，輸出對所述顯示部進(jìn)行控制的顯示控制信息；以及 校準(zhǔn)控制部，該校準(zhǔn)控制部在判斷為所述對象正在注視所述注視目標(biāo)時，向所述視線方向檢測裝置輸出校準(zhǔn)控制信號。2.如權(quán)利要求1所述的顯示控制裝置，其特征在于，所述視線引導(dǎo)部使被判斷為所述對象正在注視的所述注視目標(biāo)朝向基準(zhǔn)點縮小。3.如權(quán)利要求1所述的顯示控制裝置，其特征在于，所述視線引導(dǎo)部將被判斷為所述對象正在注視的第I注視目標(biāo)和接下來應(yīng)注視的第2注視目標(biāo)配置在所述顯示部中的不同位置。4.如權(quán)利要求3所述的顯示控制裝置，其特征在于，所述第2注視目標(biāo)是決定通過所述第I注視目標(biāo)選擇的操作的確定鍵。5.如權(quán)利要求3所述的顯示控制裝置，其特征在于，所述視線引導(dǎo)部將所述第I及所述第2注視目標(biāo)配置在所述顯示部的顯示畫面中的對角位置。6.如權(quán)利要求3所述的顯示控制裝置，其特征在于，在從顯示所述第I注視目標(biāo)的第I顯示畫面向顯示所述第2注視目標(biāo)的第2顯示畫面跳轉(zhuǎn)時，所述視線引導(dǎo)部將所述第I及所述第2注視目標(biāo)分別配置在所述第I及所述第2顯示畫面中互相為對角關(guān)系的位置。7.如權(quán)利要求1所述的顯示控制裝置，其特征在于，所述視線引導(dǎo)部使被判斷為所述對象正在注視的所述注視目標(biāo)向所述顯示部的顯示畫面中預(yù)先設(shè)定的方向移動。8.如權(quán)利要求1所述的顯示控制裝置，其特征在于，所述視線引導(dǎo)部使所述注視目標(biāo)向所述顯示部的顯示畫面中預(yù)先設(shè)定的位置移動。9.如權(quán)利要求8所述的顯示控制裝置，其特征在于，所述視線引導(dǎo)部使所述注視目標(biāo)優(yōu)先移動至所述顯示部的顯示畫面中預(yù)先設(shè)定的多個基準(zhǔn)點中、視線方向檢測信息的校準(zhǔn)精度最差的基準(zhǔn)點，并且使所述注視目標(biāo)為縮小狀態(tài)。10.如權(quán)利要求1所述的顯示控制裝置，其特征在于，具備進(jìn)行對象認(rèn)證的個人認(rèn)證部， 所述校準(zhǔn)控制部將經(jīng)所述個人認(rèn)證部認(rèn)證的對象的個人識別信息與校準(zhǔn)控制信號一起輸出。11.如權(quán)利要求1所述的顯示控制裝置，其特征在于，所述校準(zhǔn)控制部根據(jù)預(yù)先設(shè)定的條件，輸出所述校準(zhǔn)控制信號。12.如權(quán)利要求11所述的顯示控制裝置，其特征在于，在接收到對象所進(jìn)行的開關(guān)操作時，所述校準(zhǔn)控制部至少輸出校準(zhǔn)數(shù)據(jù)保存開始命令或保存停止命令作為校準(zhǔn)控制信號。13.如權(quán)利要求11所述的顯示控制裝置，其特征在于，在所述視線狀態(tài)判斷部判斷為所述對象正在注視所述注視目標(biāo)時，所述校準(zhǔn)控制部至少輸出校準(zhǔn)數(shù)據(jù)保存開始命令作為校準(zhǔn)控制信號。14.如權(quán)利要求11所述的顯示控制裝置，其特征在于，在所述對象的注視狀態(tài)經(jīng)過了預(yù)先設(shè)定的時間時，所述校準(zhǔn)控制部至少輸出校準(zhǔn)數(shù)據(jù)保存停止命令作為校準(zhǔn)控制信號。15.如權(quán)利要求1所述的顯示控制裝置，其特征在于，在視線方向檢測裝置的校準(zhǔn)精度超過預(yù)先設(shè)定的閾值時，所述視線引導(dǎo)部解除所述視線的引導(dǎo)。16.—種顯示控制裝置的控制方法，該顯示控制裝置的控制方法將顯示部所顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)來控制視線方向檢測裝置的校準(zhǔn)，其特征在于， 視線狀態(tài)判斷部基于所述視線方向檢測裝置所檢測出的視線方向檢測信息以及所述注視目標(biāo)的顯示信息，判斷對象是否正在注視存在于其視線方向上的所述注視目標(biāo)， 視線引導(dǎo)部輸出所述注視目標(biāo)的顯示信息以及所述注視目標(biāo)的顯示形態(tài)相關(guān)的畫面控制信息，并在判斷為所述對象正在注視所述注視目標(biāo)時，改變所述注視目標(biāo)的顯示形態(tài)，從而引導(dǎo)所述對象的視線， 顯示控制部基于所述視線引導(dǎo)部輸出的所述畫面控制信息，輸出對所述顯示部進(jìn)行控制的顯示控制信息， 在判斷為所述對象正在注視所述注視目標(biāo)時，校準(zhǔn)控制部向所述視線方向檢測裝置輸出校準(zhǔn)控制信號。17.—種視線方向檢測系統(tǒng)，該視線方向檢測系統(tǒng)具備:視線方向檢測裝置，該視線方向檢測裝置檢測對象的視線方向；顯示控制裝置，該顯示控制裝置將顯示部所顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)來控制所述視線方向檢測裝置的校準(zhǔn)；以及顯示部，該顯示部基于來自所述顯示控制裝置的顯示控制信息來進(jìn)行顯示，該視線方向檢測系統(tǒng)的特征在于， 顯示控制裝置將所述顯示部所顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)來控制視線方向檢測裝置的校準(zhǔn)，具備: 視線狀態(tài)判斷部，該視線狀態(tài)判斷部基于所述視線方向檢測裝置所檢測出的視線方向檢測信息以及所述注視目標(biāo)的顯示信息，判斷所述對象是否正在注視存在于其視線方向上的所述注視目標(biāo)； 視線引導(dǎo)部，該視線引導(dǎo)部輸出所述注視目標(biāo)的顯示信息以及所述注視目標(biāo)的顯示形態(tài)相關(guān)的畫面控制信息，并在判斷為所述對象正在注視所述注視目標(biāo)時，改變所述注視目標(biāo)的顯示形態(tài)，從而引導(dǎo)所述對象的視線； 顯示控制部，該顯示控制部基于所述視線引導(dǎo)部所輸出的所述畫面控制信息，輸出對所述顯示部進(jìn)行控制的顯示控制信息；以及 校準(zhǔn)控制部，該校準(zhǔn)控制部在判斷為所述對象正在注視所述注視目標(biāo)時，向所述視線方向檢測裝置輸出校準(zhǔn)控制信號， 所述視線方向檢測裝置具備: 視線方向檢測部，該視線方向檢測部檢測所述對象的視線方向檢測信息； 校準(zhǔn)部，該校準(zhǔn)部根據(jù)所述顯示控制裝置所輸出的校準(zhǔn)控制信號，并基于所述視線方向檢測部所檢測出的視線檢測方向信息和從所述顯示控制裝置獲得的所述注視目標(biāo)的顯示信息，計算校準(zhǔn)數(shù)據(jù)；以及 存儲部，該存儲部存儲所述校準(zhǔn)數(shù)據(jù)。18.如權(quán)利要求17所述的視線方向檢測系統(tǒng)，其特征在于，所述視線方向檢測裝置的校準(zhǔn)部對對象的個人識別信息和所述校準(zhǔn)控制信號進(jìn)行輸出。19.一種視線方向檢測系統(tǒng)的校準(zhǔn)控制方法，所述視線方向檢測系統(tǒng)具備:視線方向檢測裝置，該視線方向檢測裝置檢測對象的視線方向；顯示控制裝置，該顯示控制裝置將顯示部所顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)來控制視線方向檢測裝置的校準(zhǔn)；以及顯示部，該顯示部基于來自顯示控制裝置的顯示控制信息來進(jìn)行顯示， 所述視線方向檢測系統(tǒng)的校準(zhǔn)控制方法是將所述顯示部所顯示的顯示物設(shè)為注視目標(biāo)，基于該注視目標(biāo)來控制視線方向檢測裝置的校準(zhǔn)的方法，其特征在于，視線狀態(tài)判斷部基于所述視線方向檢測裝置所檢測出的視線方向檢測信息以及所述注視目標(biāo)的顯示信息，判斷所述對象是否正在注視存在于其視線方向上的所述注視目標(biāo)，視線引導(dǎo)部輸出所述注視目標(biāo)的顯示信息以及所述注視目標(biāo)的顯示形態(tài)相關(guān)的畫面控制信息，并在判斷為所述對象正在注視所述注視目標(biāo)時，改變所述注視目標(biāo)的顯示形態(tài)，從而引導(dǎo)所述對象的視線， 顯示控制部基于所述視線引導(dǎo)部所輸出的所述畫面控制信息，輸出對所述顯示部進(jìn)行控制的顯示控制信息， 在判斷為所述對象正在注視所述注視目標(biāo)時，校準(zhǔn)控制部向所述視線方向檢測裝置輸出校準(zhǔn)控制信號， 視線方向檢測部檢測所述對象的視線方向檢測信息， 校準(zhǔn)部根據(jù)所述顯示控制裝置所輸出的校準(zhǔn)控制信號，并基于所述視線方向檢測部所檢測出的視線檢測方向信息和從所述顯示控制裝置獲得的所述注視目標(biāo)的顯示信息，來計算校準(zhǔn)數(shù)據(jù)， 存儲部存儲所述校準(zhǔn)數(shù)據(jù)。
【文檔編號】B60R11/04GK106028913SQ201480076011
【公開日】2016年10月12日
【申請日】2014年2月19日
【發(fā)明人】重田朝子, 青柳貴久, 羽下哲司
【申請人】三菱電機株式會社