電子裝置及其控制方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及電子裝置及其控制方法，更詳細(xì)地，涉及可識別車行道位置及基于識別車行道來執(zhí)行駕駛相關(guān)引導(dǎo)的電子裝置及其控制方法。
【背景技術(shù)】
[0002]當(dāng)車輛行駛時(shí)，最重要的是安全行駛及預(yù)防交通事故，為此，在車輛安裝有執(zhí)行控制車輛的姿勢、控制車輛結(jié)構(gòu)裝置的功能等的多種輔助裝置及安全帶、安全氣囊等安全裝置。
[0003]不僅如此，近期，設(shè)置于車輛的黑匣子等的裝置存儲車輛的行駛影像及從各種傳感器傳輸?shù)臄?shù)據(jù)，從而處于在車輛設(shè)置當(dāng)車輛發(fā)生交通事故時(shí)用于查明車輛的事故原因的裝置的趨勢。由于也可以在智能手機(jī)、平板電腦等便攜式終端設(shè)備安裝黑匣子或?qū)Ш絻x應(yīng)用等，因而被用作如上所述的車輛用裝置。
[0004]但實(shí)際上，目前在這種車輛用裝置中的行駛影像的利用率非常低。更具體地，即使通過目前安裝于車輛的攝像頭等的視覺傳感器來獲得車輛的行駛影像，車輛的電子裝置僅停留于單純地顯示、傳送這種影像或僅停留于生成是否脫離車道線等簡單的周邊提示信息。
[0005]并且，作為目前受關(guān)注的新的車輛電子裝置，還提出平視顯示器(HUD，Head-UpDisplay)或增強(qiáng)現(xiàn)實(shí)界面，但在這些裝置中，對車輛的行駛影像的利用率也僅停留在單純顯示或生成簡單的提示信息的層面。

【發(fā)明內(nèi)容】

[0006]本發(fā)明為了解決上述的問題而提出，本發(fā)明的目的在于，提供可利用車輛的駕駛相關(guān)影像數(shù)據(jù)來生成車輛所處的車行道位置信息，并基于此來執(zhí)行駕駛相關(guān)引導(dǎo)的電子裝置及其控制方法。
[0007]并且，本發(fā)明的另一目的在于，提供可基于增強(qiáng)現(xiàn)實(shí)來有效執(zhí)行駕駛相關(guān)引導(dǎo)的電子裝置及其控制方法。
[0008]用于實(shí)現(xiàn)上述目的的本發(fā)明一實(shí)施例的電子裝置的控制方法包括:從車輛的駕駛相關(guān)影像數(shù)據(jù)中識別車道線區(qū)域部分的步驟；從所識別的上述車道線區(qū)域部分的影像數(shù)據(jù)中生成與上述車輛所處的車行道相對應(yīng)的車道線信息的步驟；利用所生成的上述車道線信息及上述車輛所處的道路的車行道信息中的至少一種來生成上述車輛所處的車行道位置信息的步驟；以及利用所生成的上述車行道位置信息來執(zhí)行上述車輛的駕駛相關(guān)引導(dǎo)的步驟。
[0009]而且，上述車道線信息可包含與以上述車輛所處的車行道為基準(zhǔn)位于上述車行道的兩側(cè)的各車道線相對應(yīng)的車道線種類信息、車道線顏色信息。
[0010]并且，生成上述車行道位置信息的步驟可包括:從地圖數(shù)據(jù)中獲得上述車輛所處的道路的車行道信息的步驟；利用所生成的上述車道線信息來判斷上述車輛是否位于上述道路的第一車行道或末尾車行道的步驟；以及在上述車輛位于上述第一車行道或末尾車行道的情況下，反映上述道路的車行道信息來生成上述車輛所處的車行道位置信息的步驟。
[0011]而且，生成上述車行道位置信息的步驟還可包括以下步驟:若上述車輛所處的車行道隨著上述車輛變更車行道而變更為位于上述第一車行道和末尾車行道之間的車行道，則將所生成的上述車行道位置信息更新成變更后的上述車行道位置信息的步驟。
[0012]并且，本發(fā)明還可包括若上述車輛所處的車行道隨著上述車輛變更車行道來從位于上述第一車行道和末尾車行道之間的車行道變更為上述第一車行道或末尾車行道，則反映上述車輛所處的道路的車行道信息來重新生成上述車輛所處的車行道位置信息的步驟。
[0013]而且，執(zhí)行上述車輛的駕駛相關(guān)引導(dǎo)的步驟可包括利用上述車輛的導(dǎo)航路徑和上述車行道位置信息來輸出車行道變更引導(dǎo)的步驟。
[0014]并且，執(zhí)行上述車輛的駕駛相關(guān)引導(dǎo)的步驟可包括利用上述車行道位置信息來輸出上述車輛所處的車行道引導(dǎo)的步驟。
[0015]而且，本發(fā)明還包括根據(jù)基于上述車道線信息來識別的車輛所處的車行道的兩側(cè)的車道線的種類，來選擇并輸出適當(dāng)?shù)能嚨谰€脫離引導(dǎo)的步驟。
[0016]并且，上述輸出步驟可包括:生成用于執(zhí)行上述駕駛相關(guān)引導(dǎo)的指示符的步驟；以及通過增強(qiáng)現(xiàn)實(shí)來輸出所生成的上述指示符的步驟。
[0017]另一方面，用于實(shí)現(xiàn)上述目的的本發(fā)明一實(shí)施例的電子裝置包括:車道線信息生成部，從車輛的駕駛相關(guān)影像數(shù)據(jù)中識別車道線區(qū)域部分，并從所識別的上述車道線區(qū)域部分的影像數(shù)據(jù)中生成與上述車輛所處的車行道相對應(yīng)的車道線信息；車行道位置信息生成部，利用所生成的上述車道線信息及上述車輛所處的道路的車行道信息中的至少一種來生成上述車輛所處的車行道位置信息；以及控制部，利用所生成的上述車行道位置信息來執(zhí)行上述車輛的駕駛相關(guān)引導(dǎo)。
[0018]而且，上述車道線信息可包含與以上述車輛所處的車行道為基準(zhǔn)位于上述車行道的兩側(cè)的各車道線相對應(yīng)的車道線種類信息、車道線顏色信息。
[0019]并且，上述車行道位置信息生成部可從地圖數(shù)據(jù)中獲得上述車輛所處的道路的車行道信息，利用所生成的上述車道線信息來判斷上述車輛是否位于上述道路的第一車行道或末尾車行道，在上述車輛位于上述第一車行道或末尾車行道的情況下，并反映上述道路的車行道信息來生成上述車輛所處的車行道位置信息。
[0020]而且，若上述車輛所處的車行道隨著上述車輛變更車行道而變更為位于上述第一車行道和末尾車行道之間的車行道，則上述車行道位置信息生成部可將所生成的上述車行道位置信息更新成變更后的上述車行道位置信息。
[0021]并且，若上述車輛所處的車行道隨著上述車輛變更車行道來從位于上述第一車行道和末尾車行道之間的車行道變更為上述第一車行道或末尾車行道，則上述車行道位置信息生成部可反映上述車輛所處的道路的車行道信息來重新生成上述車輛所處的車行道位置信息。
[0022]而且，上述控制部可控制輸出部可利用上述車輛的導(dǎo)航路徑和上述車行道位置信息來輸出車行道變更引導(dǎo)。
[0023]并且，上述控制部可控制輸出部利用上述車行道位置信息來輸出上述車輛所處的車行道引導(dǎo)。
[0024]而且，上述控制部可控制輸出部根據(jù)基于上述車道線信息來識別的車輛所處的車行道的兩側(cè)的車道線的種類，來選擇并輸出適當(dāng)?shù)能嚨谰€脫離引導(dǎo)。
[0025]并且，上述控制部可控制輸出部生成用于執(zhí)行上述駕駛相關(guān)引導(dǎo)的指示符，并通過增強(qiáng)現(xiàn)實(shí)來輸出所生成的上述指示符。
[0026]另一方面，用于實(shí)現(xiàn)上述目的的本發(fā)明一實(shí)施例的電子裝置的控制方法包括:接收用于請求進(jìn)行路徑引導(dǎo)的用戶的輸入的步驟；基于與上述請求相對應(yīng)的目的地信息來生成路徑引導(dǎo)線的步驟；反映實(shí)際行駛車輛的行駛軌跡的半徑來校正所生成的上述路徑引導(dǎo)線的步驟；基于與本車之間的距離來使校正后的上述路徑引導(dǎo)線的高度不同，來執(zhí)行可變立體化的步驟；對基于可變立體化來生成的上述立體數(shù)據(jù)映射紋理，從而生成路徑引導(dǎo)指示符的步驟；以及通過增強(qiáng)現(xiàn)實(shí)來在畫面輸出上述路徑引導(dǎo)指示符的步驟。
[0027]而且，校正上述路徑引導(dǎo)線的步驟可包括:添加用于使本車的前方路徑引導(dǎo)線維持直線的頂點(diǎn)的步驟；向路徑引導(dǎo)線的曲線區(qū)間添加用于實(shí)現(xiàn)曲線區(qū)間的曲線化的頂點(diǎn)的步驟；以及利用所添加的頂點(diǎn)來生成反映實(shí)際行駛車輛的行駛軌跡的半徑的路徑引導(dǎo)線的步驟。
[0028]而且，執(zhí)行上述可變立體化的步驟可包括:在校正后的上述路徑引導(dǎo)線的兩側(cè)生成虛擬的路徑引導(dǎo)線的步驟；以使校正后的上述路徑引導(dǎo)線所包括的頂點(diǎn)的高度值與本車的距離成正比地增加的方式計(jì)算高度值的步驟；以及通過多邊形來對計(jì)算出高度值的上述路徑引導(dǎo)線的頂點(diǎn)和上述虛擬的路徑引導(dǎo)線所分別包括的頂點(diǎn)執(zhí)行立體化的步驟。
[0029]并且，在生成上述路徑引導(dǎo)指示符的步驟中，可在上述立體數(shù)據(jù)映射根據(jù)車輛的速度來具有位移的紋理，從而生成路徑引導(dǎo)指示符。
[0030]而且，本發(fā)明還可包括:執(zhí)行用于從攝像頭拍攝而得的拍攝影像中推定與攝像頭相對應(yīng)的攝像頭參數(shù)的校準(zhǔn)(Calibrat1n)的步驟；以及基于攝像頭參數(shù)來從攝像頭拍攝而得的影像中生成虛擬三維空間的步驟，在上述輸出步驟中，可在所生成的三維空間結(jié)合所生成的上述路徑引導(dǎo)指示符來輸出。
[0031 ] 另一方面，用于實(shí)現(xiàn)上述目的的本發(fā)明一實(shí)施例的電子裝置可包括:輸入部，接收用于請求進(jìn)行路徑引導(dǎo)的用戶的輸入；路徑引導(dǎo)線生成部，基于與上述請求相對應(yīng)的目的地信息來生成路徑引導(dǎo)線；路徑引導(dǎo)指示符生成部，利用所生成的上述路徑引導(dǎo)線，來在增強(qiáng)現(xiàn)實(shí)上生成用于路徑引導(dǎo)的路徑引導(dǎo)指示符；以及顯示部，通過增強(qiáng)現(xiàn)實(shí)來在畫面輸出所生成的上述路徑引導(dǎo)指示符，上述路徑引導(dǎo)指示符生成部可包括:路徑引導(dǎo)線處理部，反映實(shí)際行駛車輛的行駛軌跡的半徑來校正所生成的上述路徑引導(dǎo)線；路徑引導(dǎo)線立體化部，基于與本車之間的距離來使校正后的上述路徑引導(dǎo)線的高度不同，并執(zhí)行可變立體化；以及紋理映射部，對基于可變立體化來生成的上述立體數(shù)據(jù)映射紋理，從而生成路徑引導(dǎo)指示符。
[0032]而且，上述路徑引導(dǎo)線處理部可添加用于使本車的前方路徑引導(dǎo)線維持直線的頂點(diǎn)，向路徑引導(dǎo)線的曲線區(qū)間添加用于實(shí)現(xiàn)曲線區(qū)間的曲線化的頂點(diǎn)，并利用所添加的頂點(diǎn)來生成反映實(shí)際行駛車輛的行駛軌跡的半徑的路徑引導(dǎo)線。而且，上述路徑引導(dǎo)線立體化部在校正后的上述路徑引導(dǎo)線的兩側(cè)生成虛擬的路徑引導(dǎo)線，以使校正后的上述路徑引導(dǎo)線所包括的頂點(diǎn)的高度值與本車的距離成正比地增加的方式計(jì)算高度值，并通過多邊形來對計(jì)算出高度值的上述路徑引導(dǎo)線的頂點(diǎn)和上述虛擬的路徑引導(dǎo)線所分別包括的頂點(diǎn)執(zhí)行立體化。
[0033]并且，上述紋理映射部可通過在上述立體數(shù)據(jù)映射根據(jù)車輛的速度來具有位移的紋理，從而生成路徑引導(dǎo)指示符。
[0034]而且，本發(fā)明還可包括:校準(zhǔn)部，執(zhí)行用于從攝像頭拍攝而得的拍攝影像中推定與攝像頭相對應(yīng)的攝像頭參數(shù)的校準(zhǔn)；以及三維空間生成部，基于攝像頭參數(shù)來從攝像頭拍攝而得的影像中生成虛擬三維空間，上述顯示部可在所生成的三維空間結(jié)合所生成的上述路徑引導(dǎo)指示符來輸出。
[0035]另一方面，用于實(shí)現(xiàn)上述目的的本發(fā)明一實(shí)施例的記錄介質(zhì)可記錄用于在計(jì)算機(jī)執(zhí)行上述電子裝置的控制方法的程序代碼。
[0036]根據(jù)上述的本發(fā)明的多種實(shí)施例，可從車道線區(qū)域部分的影像數(shù)據(jù)中生成與車輛所處的車行道相對應(yīng)的車道線信息，并可執(zhí)行必要的處理。由此，可執(zhí)行包括利用車道線信息的車道線界面輸出及生成增強(qiáng)現(xiàn)實(shí)界面的多種信息處理。
[0037]并且，根據(jù)本發(fā)明的多種實(shí)施例，可在道路的中央車行道為多個(gè)的情況下(例如，車行道的數(shù)量為四個(gè)以上的情況)，可準(zhǔn)確知曉在多個(gè)中央車行道中車輛所處的車行道。
[0038]并且，根據(jù)本發(fā)明的多種實(shí)施例，可判斷車輛所處的車行道來向駕駛?cè)藛T進(jìn)行引導(dǎo)，從而可執(zhí)行輔助駕駛?cè)藛T的作用。
[0039]并且，根據(jù)本發(fā)明的多種實(shí)施例，利用導(dǎo)航儀的路徑信息和車輛所處的車行道來準(zhǔn)確執(zhí)行車行道變更提示，從而可謀求用戶的便利。
[0040]并且，根據(jù)本發(fā)明的多種實(shí)施例，利用車道線信息來根據(jù)正處于行駛過程中的車行道的兩側(cè)的車道線的種類可選擇性地執(zhí)行適當(dāng)?shù)能囆械雷兏崾?，從而可提高車行道變更提示的性能，并可提供豐富的信息。
[0041]并且，根據(jù)本發(fā)明的多種實(shí)施例，通過路徑引導(dǎo)線的立體化處理，來實(shí)時(shí)構(gòu)建適合增強(qiáng)現(xiàn)實(shí)的路徑引導(dǎo)指示符，從而可在二維的攝像頭影像上真實(shí)、有效地顯示三維路徑引導(dǎo)指示符。即，可以以路徑引導(dǎo)線位于實(shí)際道路的方式顯示，而不是顯示以往的增強(qiáng)現(xiàn)實(shí)導(dǎo)航儀的單純形態(tài)的路徑引導(dǎo)線。
【附圖說明】
[0042]圖1為表不本發(fā)明一實(shí)施例的電子裝置的框圖。
[0043]圖2為用于說明與本發(fā)明一實(shí)施例的電子裝置相連接的系統(tǒng)的網(wǎng)絡(luò)的圖