本發(fā)明涉及影像監(jiān)視系統(tǒng)以及影像監(jiān)視方法。

背景技術(shù)：

在采用多個監(jiān)視照相機(jī)的影像監(jiān)視系統(tǒng)中，具有用于監(jiān)視員掌握作為監(jiān)視對象的建筑物或用地的整體影像的方法(例如，參照專利文獻(xiàn)1以及非專利文獻(xiàn)1)。

在專利文獻(xiàn)1中，提出了以下這樣的方法：管理利用多個監(jiān)視照相機(jī)拍攝的影像和監(jiān)視照相機(jī)的設(shè)置場所的信息，合成鄰接的監(jiān)視照相機(jī)的影像，生成從正上方俯瞰屋子或地板或建筑物的影像。專利文獻(xiàn)1的系統(tǒng)具備多個建筑物內(nèi)服務(wù)器和監(jiān)視服務(wù)器。各個建筑物內(nèi)服務(wù)器根據(jù)監(jiān)視照相機(jī)的設(shè)置場所的信息，根據(jù)鄰接的監(jiān)視照相機(jī)的影像來生成合成圖像。監(jiān)視服務(wù)器接收由多個建筑物內(nèi)服務(wù)器生成的合成影像作為輸入，生成從上俯視地板整體的俯瞰影像。監(jiān)視服務(wù)器根據(jù)各個地板的俯瞰影像生成建筑物整體的俯瞰影像。由此，對監(jiān)視員提供建筑物整體的俯瞰影像。

在非專利文獻(xiàn)1中，提出了以下這樣的方法：利用多個監(jiān)視照相機(jī)對車站的站臺圍欄附近的影像進(jìn)行攝影，通過所拍攝的影像的視點(diǎn)變換來顯示從正上方觀看的影像。非專利文獻(xiàn)1的系統(tǒng)具備控制終端和顯示終端?？刂平K端進(jìn)行沿著車站的平臺圍欄設(shè)置的監(jiān)視照相機(jī)的影像的視點(diǎn)變換和微調(diào)。顯示終端接收基于控制終端的視點(diǎn)變換后的影像作為輸入，生成相鄰地顯示鄰接的監(jiān)視照相機(jī)的影像的布局。由此，對車站工作人員以及鐵道乘務(wù)員提供站臺與列車的邊界位置的俯瞰影像。

現(xiàn)有技術(shù)文獻(xiàn)

專利文獻(xiàn)

專利文獻(xiàn)1：日本特開2008-118466號公報

非專利文獻(xiàn)

非專利文獻(xiàn)1：川邊，江上，中山著，“トップビューモニタシステム”，日本鐵道控制論協(xié)會，2013年11月發(fā)行，論文編號407

技術(shù)實(shí)現(xiàn)要素：

發(fā)明所要解決的課題

在向大規(guī)模的設(shè)施應(yīng)用提供現(xiàn)有的俯瞰影像的系統(tǒng)時，監(jiān)視照相機(jī)與進(jìn)行圖像處理(例如，視點(diǎn)變換)的計算機(jī)之間的網(wǎng)絡(luò)頻帶不足。因此，需要導(dǎo)入多個專利文獻(xiàn)1的建筑物內(nèi)服務(wù)器或者非專利文獻(xiàn)1的控制終端，并將它們分為多個網(wǎng)絡(luò)段。

例如，在非專利文獻(xiàn)1中，記載了所使用的動態(tài)圖像的分辨率是1920×1080、幀率是30fps(frames·per·second)。在專利文獻(xiàn)1中雖然沒有明確記載所使用的動態(tài)圖像的規(guī)格，但在以當(dāng)前在市場上銷售的標(biāo)準(zhǔn)的監(jiān)視照相機(jī)的性能為前提的情況下，假定使用與非專利文獻(xiàn)1同等性能的照相機(jī)。另外，在非專利文獻(xiàn)1中，記載了利用以太網(wǎng)(注冊商標(biāo))連接監(jiān)視照相機(jī)與控制終端之間的情況。當(dāng)從監(jiān)視照相機(jī)對專利文獻(xiàn)1的建筑物內(nèi)服務(wù)器或者非專利文獻(xiàn)1的控制終端采用當(dāng)前在市場上使用的1Gbps(Gigabits·per·second)頻帶的以太網(wǎng)(注冊商標(biāo))來發(fā)送動態(tài)圖像時，需要構(gòu)建集中100臺左右的監(jiān)視照相機(jī)而得到的網(wǎng)絡(luò)段。在一般的監(jiān)視照相機(jī)系統(tǒng)中，除了輸出顯示用的影像數(shù)據(jù)之外，還始終從監(jiān)視照相機(jī)輸出記錄用的影像數(shù)據(jù)。因此，在現(xiàn)實(shí)中，能夠與1個網(wǎng)絡(luò)段連接的監(jiān)視照相機(jī)為幾十臺左右。

在具有首都圈的商用設(shè)施的車站或大型購物中心生成俯瞰影像時，需要幾千臺以上的監(jiān)視照相機(jī)。因此，必須構(gòu)建100個以上的網(wǎng)絡(luò)段。即，如前所述，需要多個專利文獻(xiàn)1的建筑物內(nèi)服務(wù)器或者非專利文獻(xiàn)1的控制終端，從而產(chǎn)生管理的復(fù)雜化或者成本增大的各種課題。

本發(fā)明的目的是例如能夠在不給影像監(jiān)視的業(yè)務(wù)帶來阻礙的情況下削減發(fā)送由多個監(jiān)視照相機(jī)拍攝的影像所需的通信頻帶。

解決問題的手段

本發(fā)明的一個方式的影像監(jiān)視系統(tǒng)具備：接收部，其從對某場所的多個區(qū)域中的各個區(qū)域的影像分別進(jìn)行拍攝的多個監(jiān)視照相機(jī)接收所拍攝的影像；控制部，其進(jìn)行在畫面上顯示由所述接收部接收到的影像的控制；操作部，其受理指定所述多個區(qū)域中的一部分區(qū)域的操作；以及指示部，在所述控制部使所述多個區(qū)域的影像顯示在所述畫面上的情況下，所述指示部指示所述多個監(jiān)視照相機(jī)以第1形式發(fā)送所拍攝的影像，在所述控制部使針對所述操作部指定的區(qū)域的影像顯示在所述畫面上的情況下，指示拍攝該指定的區(qū)域的影像的監(jiān)視照相機(jī)以數(shù)據(jù)量比所述第1形式多的第2形式發(fā)送所拍攝的影像。

發(fā)明效果

在本發(fā)明中，在顯示多個區(qū)域的影像的情況下，從監(jiān)視照相機(jī)接收質(zhì)量比顯示一部分區(qū)域的影像的情況低的影像。因此，根據(jù)本發(fā)明，不會給影像監(jiān)視的業(yè)務(wù)帶來阻礙，就能夠削減發(fā)送由多個監(jiān)視照相機(jī)拍攝的影像所需的通信頻帶。

附圖說明

圖1是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的結(jié)構(gòu)的框圖。

圖2是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的控制服務(wù)器的結(jié)構(gòu)的框圖。

圖3是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的結(jié)構(gòu)的框圖。

圖4是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的應(yīng)用例的圖。

圖5是示出實(shí)施方式1以及實(shí)施方式2的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的畫面顯示例的圖。

圖6是示出實(shí)施方式1以及實(shí)施方式2的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的其它畫面顯示例的圖。

圖7是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖8是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的控制服務(wù)器的動作例的流程圖。

圖9是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的控制服務(wù)器的動作例的流程圖。

圖10是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的控制服務(wù)器的動作例的流程圖。

圖11是示出實(shí)施方式1的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖12是示出實(shí)施方式2以及實(shí)施方式3的影像監(jiān)視系統(tǒng)的結(jié)構(gòu)的框圖。

圖13是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的結(jié)構(gòu)的框圖。

圖14是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的結(jié)構(gòu)的框圖。

圖15是示出實(shí)施方式2以及實(shí)施方式3的影像監(jiān)視系統(tǒng)的應(yīng)用例的圖。

圖16是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖17是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的動作例的流程圖。

圖18是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的動作例的流程圖。

圖19是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的動作例的流程圖。

圖20是示出實(shí)施方式2的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖21是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的結(jié)構(gòu)的框圖。

圖22是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的結(jié)構(gòu)的框圖。

圖23是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的畫面顯示例的圖。

圖24是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖25是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的動作例的流程圖。

圖26是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的動作例的流程圖。

圖27是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的監(jiān)視照相機(jī)的動作例的流程圖。

圖28是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖29是示出實(shí)施方式3的影像監(jiān)視系統(tǒng)的顯示服務(wù)器的動作例的流程圖。

圖30是示出本發(fā)明的實(shí)施方式的影像監(jiān)視系統(tǒng)的各個裝置的硬件結(jié)構(gòu)例的圖。

具體實(shí)施方式

以下，使用附圖來說明本發(fā)明的實(shí)施方式。

實(shí)施方式1.

圖1是示出本實(shí)施方式的影像監(jiān)視系統(tǒng)100的結(jié)構(gòu)的框圖。

在圖1中，影像監(jiān)視系統(tǒng)100具備多個監(jiān)視照相機(jī)101(監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m、C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m)、多個控制服務(wù)器200(控制服務(wù)器R1、R2、···、Rn)和顯示服務(wù)器300。

監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m經(jīng)由LAN102(Local·Area·Network)與控制服務(wù)器R1連接。同樣，監(jiān)視照相機(jī)C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m也經(jīng)由其它LAN102與控制服務(wù)器R2、···、Rn連接。在來自各個監(jiān)視照相機(jī)101的監(jiān)視影像的傳送以及向各個監(jiān)視照相機(jī)101的控制信息的傳送中采用LAN102。LAN102例如是以太網(wǎng)(注冊商標(biāo))。LAN102不限于有線LAN。在使用具備無線LAN功能的監(jiān)視照相機(jī)101的情況下，LAN102可以是無線LAN。LAN102可以置換為WAN(Wide·Area·Network)等其它種類的網(wǎng)絡(luò)。

控制服務(wù)器R1、R2、···、Rn經(jīng)由LAN103與公共的顯示服務(wù)器300連接。在來自各個控制服務(wù)器200的監(jiān)視影像的傳送以及向各個控制服務(wù)器200的控制信息的傳送中采用LAN103。LAN103例如是以太網(wǎng)(注冊商標(biāo))。LAN103不限于有線LAN，可以是無線LAN。LAN103可以置換為WAN等其它種類的網(wǎng)絡(luò)。

此外，在圖1所示的結(jié)構(gòu)中，1個LAN102與m臺監(jiān)視照相機(jī)101、1臺控制服務(wù)器200連接，但與1個LAN102連接的監(jiān)視照相機(jī)101以及控制服務(wù)器200的臺數(shù)是任意的。例如，與各個LAN102連接的監(jiān)視照相機(jī)101的臺數(shù)可以不同。1個LAN102可以與2臺以上的控制服務(wù)器200連接。

另外，在圖1所示的結(jié)構(gòu)中，LAN103與n臺控制服務(wù)器200、1臺顯示服務(wù)器300連接，但與LAN103連接的控制服務(wù)器200以及顯示服務(wù)器300的臺數(shù)是任意的。例如，LAN103可以僅與1臺控制服務(wù)器200連接。LAN103可以與2臺以上的顯示服務(wù)器300連接。

各個監(jiān)視照相機(jī)101對作為監(jiān)視對象的室內(nèi)或屋外的影像進(jìn)行攝影。各個監(jiān)視照相機(jī)101向任意的控制服務(wù)器200輸出所拍攝的影像。

各個控制服務(wù)器200接收多個監(jiān)視照相機(jī)101所拍攝的影像的輸入。各個控制服務(wù)器200在內(nèi)置的記錄介質(zhì)中記錄影像。各個控制服務(wù)器200將從多個監(jiān)視照相機(jī)101接收到的影像或在記錄介質(zhì)中記錄的影像變換為俯瞰影像。各個控制服務(wù)器200合成鄰接的監(jiān)視照相機(jī)101的俯瞰影像。然后，各個控制服務(wù)器200將多個監(jiān)視照相機(jī)101所拍攝的影像、它們變換后的俯瞰影像以及合成的影像輸出至顯示服務(wù)器300。

各個控制服務(wù)器200從顯示服務(wù)器300接收監(jiān)視照相機(jī)101用的控制信息的輸入。各個控制服務(wù)器200將控制信息輸出至各個監(jiān)視照相機(jī)101。

顯示服務(wù)器300從多個控制服務(wù)器200接收影像的輸入。顯示服務(wù)器300將從多個控制服務(wù)器200接收到的影像顯示在顯示器104上。顯示服務(wù)器300接收來自影像監(jiān)視系統(tǒng)100的使用者即監(jiān)視員的指示。例如，顯示服務(wù)器300通過鍵盤以及鼠標(biāo)105接收俯瞰影像的放大顯示或縮小顯示的操作。

顯示服務(wù)器300根據(jù)監(jiān)視員的指示，將控制信息輸出至各個控制服務(wù)器200，控制信息表示輸出影像的監(jiān)視照相機(jī)101和輸出的影像的分辨率以及幀率。

圖2是示出各個控制服務(wù)器200的結(jié)構(gòu)的框圖。

在圖2中，各個控制服務(wù)器200具備第1接收部201、第2接收部202、硬盤203、切換部204、第1發(fā)送部205、解碼部206、生成部207、第2發(fā)送部208、合成部209、第3發(fā)送部210、第3接收部211、管理部212和輸出部213。

以下，采用圖1以及圖2來說明控制服務(wù)器R1的各部的功能。

第1接收部201以及第2接收部202經(jīng)由LAN102接收監(jiān)視照相機(jī)C1-1、···、C1-m的影像的輸入。第1接收部201將監(jiān)視照相機(jī)C1-1、···、C1-m的影像中的待顯示為直播影像的影像發(fā)送至切換部204。第2接收部202將監(jiān)視照相機(jī)C1-1、···、C1-m的影像中的待錄像的影像記錄到硬盤203內(nèi)。硬盤203是前述的記錄介質(zhì)的例子，可置換為閃速存儲器等其它種類的記錄介質(zhì)。

切換部204根據(jù)第3接收部211的控制，進(jìn)行在顯示器104上顯示直播影像還是顯示錄像影像的切換。在顯示器104上顯示直播影像的情況下，切換部204取得第1接收部201的影像。在顯示器104上顯示錄像影像的情況下，切換部204根據(jù)時刻等所指定的信息，取得硬盤203的影像。切換部204將所取得的影像輸出至第1發(fā)送部205。切換部204還將所取得的影像輸出至解碼部206。

第1發(fā)送部205經(jīng)由LAN103將從第1接收部201或硬盤203取得的影像輸出至顯示服務(wù)器300。

解碼部206將為了進(jìn)行收發(fā)而編碼后的影像變換為位圖(bitmap)圖像。解碼部206將該位圖圖像輸出至生成部207。

生成部207根據(jù)管理部212所記錄的監(jiān)視照相機(jī)C1-1、···、C1-m的視場角信息，變換從解碼部206輸入的位圖圖像，生成仿佛從正上方俯視在該位圖圖像中顯現(xiàn)的物體的俯瞰影像。生成部207將該俯瞰影像輸出至第2發(fā)送部208以及合成部209。

第2發(fā)送部208取得由生成部207生成的每個監(jiān)視照相機(jī)101的俯瞰影像。第2發(fā)送部208經(jīng)由LAN103將該俯瞰影像發(fā)送至顯示服務(wù)器300。

合成部209取得由生成部207生成的俯瞰影像。合成部209根據(jù)在管理部212中記錄的監(jiān)視照相機(jī)C1-1、···、C1-m的位置信息，合成鄰接的監(jiān)視照相機(jī)101的俯瞰影像。合成部209向第3發(fā)送部210輸出所合成的俯瞰影像。

第3發(fā)送部210經(jīng)由LAN103將從合成部209輸入的合成后的俯瞰影像輸出至顯示服務(wù)器300。

第3接收部211經(jīng)由LAN103接收從顯示服務(wù)器300的鍵盤以及鼠標(biāo)105(如果顯示器104是觸摸面板，則可以是顯示器104)輸入的信息。在該信息中，例如包含監(jiān)視照相機(jī)C1-1、···、C1-m的位置信息和監(jiān)視照相機(jī)C1-1、···、C1-m的視場角信息?；蛘?，包含指定監(jiān)視照相機(jī)C1-1、···、C1-m輸出的影像的分辨率以及幀率的信息?；蛘?，包含表示要顯示監(jiān)視照相機(jī)C1-1、···、C1-m中的哪個監(jiān)視照相機(jī)101的影像的信息、指定該監(jiān)視照相機(jī)101輸出的影像的分辨率以及幀率的信息。

管理部212從第3接收部211接收信息的輸入。管理部212記錄所輸入的信息。

輸出部213經(jīng)由LAN102將在管理部212中記錄的、指定影像的分辨率以及幀率的信息輸出至監(jiān)視照相機(jī)C1-1、···、C1-m?；蛘?，輸出部213根據(jù)在管理部212中記錄的表示要顯示哪個監(jiān)視照相機(jī)101的影像的信息，經(jīng)由LAN102將在管理部212中記錄的、指定該監(jiān)視照相機(jī)101輸出的影像的分辨率以及幀率的信息輸出至該監(jiān)視照相機(jī)101。

控制服務(wù)器R1以外的控制服務(wù)器200的各部的功能與上述的控制服務(wù)器R1的功能相同。

圖3是示出顯示服務(wù)器300的結(jié)構(gòu)的框圖。

在圖3中，顯示服務(wù)器300具備第1接收部301、第1解碼部302、顯示部303、第2接收部304、第3接收部305、合成部306、操作部307、第1管理部308、第2管理部309和發(fā)送部310。

以下，使用圖1以及圖3，說明與控制服務(wù)器R1、R2關(guān)聯(lián)的顯示服務(wù)器300的各部的功能。

第1接收部301經(jīng)由LAN103接收控制服務(wù)器R1、R2的第1發(fā)送部205輸出的影像。第1接收部301將接收到的影像輸出至第1解碼部302。

第1解碼部302對從第1接收部301輸入的影像進(jìn)行解碼。第1解碼部302將解碼后的影像輸出至顯示部303。

顯示部303在顯示器104上顯示從第1解碼部302輸入的影像。

第2接收部304經(jīng)由LAN103接收控制服務(wù)器R1、R2的第2發(fā)送部208輸出的每個監(jiān)視照相機(jī)101的俯瞰影像。第2接收部304將接收到的俯瞰影像輸出至合成部306。

第3接收部305經(jīng)由LAN103接收控制服務(wù)器R1、R2的第3發(fā)送部210輸出的合成后的俯瞰影像。第3接收部305將接收到的俯瞰影像輸出至合成部306。

合成部306合成從第2接收部304輸入的每個監(jiān)視照相機(jī)101的俯瞰影像以及從第3接收部305輸入的合成后的俯瞰影像，生成整體的俯瞰影像。合成部306將所生成的整體的俯瞰影像輸出至顯示部303。

操作部307從鍵盤以及鼠標(biāo)105(如果顯示器104是觸摸面板，則可以是顯示器104)接收信息的輸入。在該信息中，例如包含監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m的位置信息、監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m的視場角信息以及設(shè)置有監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m的場所整體的地圖信息?；蛘撸c影像的放大顯示或縮小顯示的操作相關(guān)的信息。在與該操作相關(guān)的信息中，包含指定監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m輸出的影像的分辨率以及幀率的信息?；蛘?，包含表示要顯示監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m中的哪個監(jiān)視照相機(jī)101的影像的信息和指定該監(jiān)視照相機(jī)101輸出的影像的分辨率以及幀率的信息。操作部307將所輸入的信息輸出至第1管理部308、第2管理部309和發(fā)送部310。

第1管理部308接收監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m的位置信息與監(jiān)視照相機(jī)C1-1、···、C1-m、C2-1、···、C2-m的視場角信息的輸入。另外，第1管理部308接收與影像的放大顯示或縮小顯示的操作相關(guān)的信息的輸入。第1管理部308將所輸入的信息輸出至合成部306。

第2管理部309接收地圖信息的輸入。第2管理部309將所輸入的地圖信息輸出至合成部306。

發(fā)送部310經(jīng)由LAN103將從第1管理部308以及第2管理部309輸入的信息輸出至控制服務(wù)器200的第3接收部211。

與控制服務(wù)器R1、R2以外的控制服務(wù)器200關(guān)聯(lián)的顯示服務(wù)器300的各部的功能和與上述的控制服務(wù)器R1、R2關(guān)聯(lián)的各部的功能相同。

圖4是示出影像監(jiān)視系統(tǒng)100的應(yīng)用例的圖。

在圖4中，場所P例如是大型店鋪的內(nèi)部、游樂園、車站的站臺或站內(nèi)的通路、公寓或大廈的居室或通路。雖然通常利用多個監(jiān)視照相機(jī)101來攝影場所P，但為了簡化說明，這里，利用4臺監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1對大致整體進(jìn)行攝影。

監(jiān)視照相機(jī)C1-1對場所P的攝影區(qū)域a進(jìn)行攝影。監(jiān)視照相機(jī)C1-2對場所P的攝影區(qū)域b進(jìn)行攝影。監(jiān)視照相機(jī)C1-3對場所P的攝影區(qū)域c進(jìn)行攝影。監(jiān)視照相機(jī)C2-1對場所P的攝影區(qū)域d進(jìn)行攝影。攝影區(qū)域a～d可相互重疊。

控制服務(wù)器R1經(jīng)由LAN102接收監(jiān)視照相機(jī)C1-1、C1-2、C1-3的監(jiān)視影像?？刂品?wù)器R2經(jīng)由LAN102接收監(jiān)視照相機(jī)C2-1的監(jiān)視影像。

顯示服務(wù)器300從控制服務(wù)器R1、R2接收監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的通常的影像、變換這些通常的影像而得到的攝影區(qū)域a～d的個別俯瞰影像、以及合成這些個別俯瞰影像而得到的場所P的整體的俯瞰影像。顯示服務(wù)器300將通常的影像合場所P的整體的俯瞰影像顯示在顯示器104上。顯示服務(wù)器300從鍵盤以及鼠標(biāo)105受理放大或縮小顯示影像或者指定顯示位置的操作。顯示服務(wù)器300從鍵盤以及鼠標(biāo)105接收場所P的地圖信息、監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的位置信息、監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的視場角信息和監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的分辨率以及幀率的信息的輸入。顯示服務(wù)器300管理所輸入的信息。

以下，說明圖4的例子中的顯示服務(wù)器300的畫面顯示。

圖5是示出顯示服務(wù)器300的畫面顯示例的圖。

在圖5中，左側(cè)的顯示畫面501是在顯示器104上顯示的場所P的整體的俯瞰影像。當(dāng)為了警備等而始終對監(jiān)視影像進(jìn)行監(jiān)視的監(jiān)視員利用顯示服務(wù)器300的鍵盤以及鼠標(biāo)105作出顯示整體影像的指示時，在畫面上顯示場所P的整體影像。

右側(cè)的顯示畫面502是在顯示器104上顯示的攝影區(qū)域b、d(的一部分)的俯瞰影像。當(dāng)監(jiān)視員利用顯示服務(wù)器300的鍵盤以及鼠標(biāo)105作出使顯示畫面501的中心部進(jìn)行放大顯示的指示(即，放大指示)時，攝影區(qū)域a、c從畫面的顯示范圍消失，在畫面上顯示攝影區(qū)域b、d的放大影像。

圖6是示出顯示服務(wù)器300的其它畫面顯示例的圖。

在圖6中，左側(cè)的顯示畫面511與圖5的左側(cè)的顯示畫面501同樣是在顯示器104上顯示的場所P的整體的俯瞰影像。場所P具有關(guān)注位置512。關(guān)注位置512是為了警備等而對監(jiān)視影像始終進(jìn)行監(jiān)視的監(jiān)視員需要在監(jiān)視業(yè)務(wù)的一個環(huán)節(jié)中密切監(jiān)視的區(qū)域。

右側(cè)的顯示畫面513是在顯示器104上顯示的關(guān)注位置512的俯瞰影像。當(dāng)監(jiān)視員利用顯示服務(wù)器300的鍵盤以及鼠標(biāo)105作出放大顯示顯示畫面501的關(guān)注位置512的指示(即，關(guān)注指示)時，攝影區(qū)域a、d從畫面的顯示范圍消失，在畫面上顯示攝影區(qū)域b、c的放大影像。

以下，說明圖4的例子中的影像監(jiān)視系統(tǒng)100的動作(本實(shí)施方式的影像監(jiān)視方法)。

首先，說明照相機(jī)控制動作。

圖7是示出從監(jiān)視員作出了顯示影像的放大指示或關(guān)注指示時的顯示服務(wù)器300的動作例的流程圖。

在S601中，操作部307經(jīng)由鍵盤以及鼠標(biāo)105從監(jiān)視員接收放大指示或關(guān)注指示的操作作為顯示控制操作。操作部307利用顯示控制操作將作為顯示對象的攝影區(qū)域的信息輸出至發(fā)送部310。

在S602中，發(fā)送部310從第1管理部308以及第2管理部309取得對攝影區(qū)域a～d進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的信息。發(fā)送部310根據(jù)在S601中輸入的信息和從第1管理部308以及第2管理部309取得的信息，選擇顯示以及非顯示監(jiān)視照相機(jī)。在圖5的放大指示的例子中，對攝影區(qū)域a、c進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-3成為非顯示監(jiān)視照相機(jī)，對攝影區(qū)域b、d進(jìn)行拍攝的監(jiān)視照相機(jī)C1-2、C2-1成為顯示監(jiān)視照相機(jī)。

在S603中，發(fā)送部310從第1管理部308取得在S602中選擇的顯示監(jiān)視照相機(jī)的設(shè)定值。在圖5的放大指示的例子中，為了放大監(jiān)視照相機(jī)C1-2、C2-1的影像，將監(jiān)視照相機(jī)C1-2、C2-1的分辨率以及幀率設(shè)定為較高的值。

在S604中，發(fā)送部310從第1管理部308取得控制服務(wù)器200的信息。發(fā)送部310根據(jù)所取得的信息，選擇連接了需要進(jìn)行設(shè)定變更的監(jiān)視照相機(jī)101的控制服務(wù)器200。發(fā)送部310對所選擇的控制服務(wù)器200的第3接收部211輸出控制信息。在控制信息中包含表示在S602中選擇的顯示以及非顯示監(jiān)視照相機(jī)的信息、在S603中取得的設(shè)定值。在圖5的放大指示的例子中，示出監(jiān)視照相機(jī)C1-1、C1-3為非顯示監(jiān)視照相機(jī)、監(jiān)視照相機(jī)C1-2為顯示監(jiān)視照相機(jī)的情況，將指定監(jiān)視照相機(jī)C1-2的分辨率以及幀率的控制信息發(fā)送至控制服務(wù)器R1。另外，示出監(jiān)視照相機(jī)C2-1為顯示監(jiān)視照相機(jī)的情況，將指定監(jiān)視照相機(jī)C2-1的分辨率以及幀率的控制信息發(fā)送至控制服務(wù)器R2。

圖8是示出從顯示服務(wù)器300發(fā)送了控制信息時的控制服務(wù)器R1的動作例的流程圖。

在S611中，第3接收部211從顯示服務(wù)器300的發(fā)送部310接收在S604中發(fā)送的控制信息。第3接收部211將所接收的控制信息輸出至切換部204以及輸出部213。

在S612中，切換部204根據(jù)在S611中輸入的控制信息，僅處理顯示監(jiān)視照相機(jī)的影像。在圖5的放大指示的例子中，停止對攝影區(qū)域a、c進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-3的影像的輸入，僅接收對攝影區(qū)域b進(jìn)行拍攝的監(jiān)視照相機(jī)C1-2的影像的輸入。

在S613中，輸出部213根據(jù)在S611中輸入的控制信息，對非顯示監(jiān)視照相機(jī)指示停止影像的輸出。在圖5的放大指示的例子中，對監(jiān)視照相機(jī)C1-1、C1-3指示停止影像的輸出。

在S614中，輸出部213根據(jù)在S611中輸入的控制信息，指示顯示監(jiān)視照相機(jī)將輸出的影像的分辨率以及幀率的值設(shè)定得較高。在圖5的放大指示的例子中，對監(jiān)視照相機(jī)C1-2通知分辨率以及幀率的設(shè)定值。

從顯示服務(wù)器300發(fā)送控制信息時的控制服務(wù)器R2的動作與圖8所示的動作相同。

接著，說明俯瞰影像生成動作。

如前述的S611那樣，第3接收部211從顯示服務(wù)器300的發(fā)送部310接收控制信息。在控制信息中包含通過監(jiān)視員的操作指定的信息、和預(yù)先設(shè)定的信息。在控制信息中，例如包含表示在顯示器104的畫面上顯示直播影像和記錄影像中的哪一個圖像的信息。還包含表示是顯示場所P的整體俯瞰影像、還是放大顯示一部分?jǐn)z影區(qū)域的俯瞰影像、還是顯示一部分?jǐn)z影區(qū)域的通常影像(即，變換為俯瞰影像之前的監(jiān)視影像)的信息。如前所述，有時還包含表示顯示以及非顯示監(jiān)視照相機(jī)的信息和顯示監(jiān)視照相機(jī)的設(shè)定值。

圖9以及圖10是示出從顯示監(jiān)視照相機(jī)發(fā)送了影像時的控制服務(wù)器R1的動作例的流程圖。

在S621中，切換部204根據(jù)由第3接收部211接收的控制信息，切換是處理直播影像、還是處理記錄影像。在所顯示的影像是直播影像的情況下，流程進(jìn)入S622。在所顯示的影像是記錄影像的情況下，流程進(jìn)入S623。

在S622中，切換部204從第1接收部201接收影像的輸入。然后，流程進(jìn)入S624。

在S623中，切換部204從硬盤203取得影像。然后，流程進(jìn)入S624。

在S624中，切換部204根據(jù)由第3接收部211接收的控制信息，判定影像是否是顯示監(jiān)視照相機(jī)的影像。在影像是顯示監(jiān)視照相機(jī)的影像的情況下，流程進(jìn)入S625。在影像不是顯示監(jiān)視照相機(jī)的影像的情況下，流程結(jié)束。在圖5的放大指示的例子中，監(jiān)視照相機(jī)C1-1、C1-3是非顯示監(jiān)視照相機(jī)，監(jiān)視照相機(jī)C1-2是顯示照相機(jī)，所以，在影像是監(jiān)視照相機(jī)C1-2的影像的情況下，流程進(jìn)入S625。在影像是監(jiān)視照相機(jī)C1-1、C1-3的影像的情況下，流程結(jié)束。

在S625中，切換部204根據(jù)由第3接收部211接收的控制信息，判定所顯示的影像是否是通常影像。在所顯示的影像是通常影像的情況下，流程進(jìn)入S626。在顯示的影像不是通常影像的情況下，流程進(jìn)入S627。

在S626中，切換部204直接從第1發(fā)送部205向顯示服務(wù)器300的第1接收部301輸出在S622或S623中取得的影像。

在S627中，切換部204根據(jù)由第3接收部211接收的控制信息，判定顯示的影像是否是俯瞰影像。在顯示的影像是俯瞰影像的情況下，切換部204將在S622或S623中取得的影像輸出至解碼部206。然后，流程進(jìn)入S628。在顯示的影像不是俯瞰影像的情況下，流程結(jié)束。

在S628中，解碼部206將在S622或S623中取得的影像變換為位圖數(shù)據(jù)。解碼部206將該位圖數(shù)據(jù)輸出至生成部207。

在S629中，生成部207從管理部212取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3的視場角信息。生成部207基于所取得的視場角信息，根據(jù)在S628中輸入的位圖數(shù)據(jù)，生成俯瞰影像。生成部207將所生成的俯瞰影像輸出至第2發(fā)送部208以及合成部209。

在S630中，第2發(fā)送部208將在S629中輸入的俯瞰影像輸出至顯示服務(wù)器300的第2接收部304。

在S631中，合成部209從管理部212取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3的位置信息。合成部209根據(jù)所取得的位置信息，判定是否存在與對應(yīng)于在S629中輸入的俯瞰影像的監(jiān)視照相機(jī)101鄰接的監(jiān)視照相機(jī)101。當(dāng)存在鄰接的監(jiān)視照相機(jī)101時，流程進(jìn)入S632。當(dāng)不存在鄰接的監(jiān)視照相機(jī)101時，流程結(jié)束。

在S632中，合成部209合成在S629中輸入的俯瞰影像以及鄰接的監(jiān)視照相機(jī)101的俯瞰影像。在圖5的例子中生成左側(cè)的顯示畫面501的情況下，在S629中輸入監(jiān)視照相機(jī)C1-1、C1-2、C1-3的俯瞰影像，在S632中執(zhí)行這些俯瞰影像的合成處理。在生成右側(cè)的顯示畫面502的情況下，只是在S629中生成監(jiān)視照相機(jī)C1-2的俯瞰影像，不執(zhí)行俯瞰影像的合成處理。

在S633中，合成部209將在S632中合成的俯瞰影像輸出至第3發(fā)送部210。第3發(fā)送部210將所輸入的俯瞰影像輸出至顯示服務(wù)器300的第3接收部305。

從顯示監(jiān)視照相機(jī)發(fā)送了影像時的控制服務(wù)器R2的動作與圖9以及圖10所示的動作相同。

圖11是示出從控制服務(wù)器R1、R2發(fā)送了影像時的顯示服務(wù)器300的動作例的流程圖。

在S641中，在所顯示的影像是通常影像的情況下，第1接收部301從控制服務(wù)器R1或控制服務(wù)器R2的第1發(fā)送部205接收影像。第1接收部301將所接收的影像輸出至第1解碼部302。然后，流程進(jìn)入S642。在所顯示的影像不是通常影像的情況下，流程進(jìn)入S644。

在S642中，第1解碼部302對在S641中輸入的影像進(jìn)行解碼。第1解碼部302將解碼的影像輸出至顯示部303。

在S643中，顯示部303將在S642中輸入的影像顯示在顯示器104上。

在S644中，在所顯示的影像是俯瞰影像的情況下，流程進(jìn)入S645。在所顯示的影像不是俯瞰影像的情況下，流程結(jié)束。

在S645中，第2接收部304從控制服務(wù)器R1以及控制服務(wù)器R2的至少任意一個的第2發(fā)送部208接收影像。還存在第3接收部305從控制服務(wù)器R1以及控制服務(wù)器R2的至少任意一個的第3發(fā)送部210接收影像的情況。第2接收部304以及第3接收部305將接收到的影像輸出至合成部306。

在S646中，合成部306從第1管理部308取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的位置信息。合成部306從第2管理部309取得地圖信息。合成部306根據(jù)所取得的位置信息以及地圖信息，如果需要合成，則合成在S645中輸入的影像。合成部306將合成的影像輸出至顯示部303。如果不需要合成，則合成部306將在S645中輸入的影像輸出至顯示部303。在圖5的例子中，在生成左側(cè)的顯示畫面501的情況下，在S645中輸入合成監(jiān)視照相機(jī)C1-1、C1-2、C1-3的俯瞰影像后的俯瞰影像、以及監(jiān)視照相機(jī)C2-1的俯瞰影像，在S646中執(zhí)行這些俯瞰影像的合成處理。在生成右側(cè)的顯示畫面502的情況下，在S645中輸入監(jiān)視照相機(jī)C1-2的俯瞰影像和監(jiān)視照相機(jī)C2-1的俯瞰影像，在S646中執(zhí)行這些俯瞰影像的合成處理。

在S647中，顯示部303在顯示器104上顯示在S646中輸入的影像。

如上所述，在本實(shí)施方式中，在顯示場所P的整體的俯瞰影像的情況下，抑制監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的分辨率以及幀率。因此，不壓縮網(wǎng)絡(luò)頻帶就能將影像發(fā)送至顯示服務(wù)器300。由此，能夠構(gòu)建提供俯瞰大規(guī)模的購物中心、游樂園、車站的站臺或站內(nèi)的通路等需要幾千臺以上的監(jiān)視照相機(jī)101的場所整體的影像的系統(tǒng)。

在本實(shí)施方式中，在放大俯瞰影像、或顯示關(guān)注點(diǎn)或者顯示通常影像的情況下，停止對未顯示的區(qū)域進(jìn)行拍攝的監(jiān)視照相機(jī)101的影像的輸出，并且將對所顯示的區(qū)域進(jìn)行拍攝的監(jiān)視照相機(jī)101的分辨率以及幀率設(shè)定得較高。因此，關(guān)于需要進(jìn)行密切監(jiān)視的區(qū)域，能夠在顯示器104上顯示更鮮明的影像。

在本實(shí)施方式中，影像監(jiān)視系統(tǒng)100在控制服務(wù)器200中具備第1接收部201和第2接收部202作為接收部。接收部從對某場所P的多個區(qū)域(在圖5的例子中是攝影區(qū)域a～d)中的各個區(qū)域的影像分別進(jìn)行拍攝的多個監(jiān)視照相機(jī)101(在圖5的例子中是監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1)接收所拍攝的影像。

影像監(jiān)視系統(tǒng)100在控制服務(wù)器200中具備合成部209、在顯示服務(wù)器300中具備顯示部303和合成部306作為控制部?？刂撇窟M(jìn)行在畫面(例如，顯示器104的畫面)上顯示由接收部接收的影像的控制。

影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300中具備操作部307。操作部307受理指定上述多個區(qū)域中的一部分區(qū)域(在圖5的放大指示的例子中是攝影區(qū)域b、d)的操作(例如，顯示控制操作)。

影像監(jiān)視系統(tǒng)100在控制服務(wù)器200中具備管理部212和輸出部213、在顯示服務(wù)器300中具備第1管理部308、第2管理部309和發(fā)送部310作為指示部。在通過控制部在畫面上顯示上述多個區(qū)域的影像的情況下，指示部指示多個監(jiān)視照相機(jī)101以第1形式發(fā)送所拍攝的影像。在通過控制部在畫面上顯示對操作部307指定的區(qū)域的影像的情況下，指示部指示拍攝該指定的區(qū)域的影像的監(jiān)視照相機(jī)101(在圖5的放大指示的例子中為監(jiān)視照相機(jī)C1-2、C2-1)以數(shù)據(jù)量比第1形式多的第2形式發(fā)送所拍攝的影像。第1形式以及第2形式例如決定為，以第1形式發(fā)送的影像的分辨率以及幀率的至少任意一個比以第2形式發(fā)送的影像低。

根據(jù)本實(shí)施方式，利用上述這樣的動作，可削減發(fā)送由多個監(jiān)視照相機(jī)101拍攝的影像所需的通信頻帶，而不會給影像監(jiān)視的業(yè)務(wù)帶來阻礙。

在通過控制部在畫面上顯示對操作部307指定的區(qū)域的影像的情況下時，優(yōu)選的是，指示部指示多個監(jiān)視照相機(jī)101中的拍攝該指定的區(qū)域的影像的監(jiān)視照相機(jī)101以外的監(jiān)視照相機(jī)101(在圖5的放大指示的例子中為監(jiān)視照相機(jī)C1-1、C1-3)不發(fā)送所拍攝的影像。由此，可在所顯示的影像的發(fā)送中使用更多的通信頻帶。

在本實(shí)施方式中，影像監(jiān)視系統(tǒng)100還在控制服務(wù)器200中具備生成部207。生成部207變換由接收部從多個監(jiān)視照相機(jī)101分別接收到的影像，生成相當(dāng)于從正上方俯視上述各個區(qū)域的影像的俯瞰影像(例如，攝影區(qū)域a～d各自的俯瞰影像)。

在畫面上顯示上述多個區(qū)域的影像的情況下，控制部進(jìn)行以下這樣的控制：合成由生成部207生成的俯瞰影像，來生成場所P的整體的俯瞰影像，在畫面上顯示所生成的俯瞰影像。

根據(jù)本實(shí)施方式，通過上述這樣的動作，影像監(jiān)視的業(yè)務(wù)的效率提高。

在本實(shí)施方式中，控制服務(wù)器200與顯示服務(wù)器300的功能的區(qū)分方法不限于以上的情況，可適當(dāng)變更。例如，可將控制服務(wù)器200和顯示服務(wù)器300合并為單一的服務(wù)器。

實(shí)施方式2.

關(guān)于本實(shí)施方式，主要說明與實(shí)施方式1的差異。

圖12是示出本實(shí)施方式的影像監(jiān)視系統(tǒng)100的結(jié)構(gòu)的框圖。

在圖12中，影像監(jiān)視系統(tǒng)100具備多個監(jiān)視照相機(jī)400(監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m、C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m)、多個網(wǎng)絡(luò)裝置106(網(wǎng)絡(luò)裝置T1、T2、···、Tn)和顯示服務(wù)器300。

監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m經(jīng)由LAN102與網(wǎng)絡(luò)裝置T1連接。同樣，監(jiān)視照相機(jī)C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m也經(jīng)由其它LAN102與網(wǎng)絡(luò)裝置T2、···、Tn連接。LAN102用于從各個監(jiān)視照相機(jī)400傳送監(jiān)視影像以及向各個監(jiān)視照相機(jī)400傳送控制信息。

網(wǎng)絡(luò)裝置T1、T2、···、Tn經(jīng)由LAN103與共用的顯示服務(wù)器300連接。LAN103用于從各個網(wǎng)絡(luò)裝置106傳送監(jiān)視影像以及向各個網(wǎng)絡(luò)裝置106傳送控制信息。

網(wǎng)絡(luò)裝置T1、T2、···、Tn將監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m分為多個網(wǎng)絡(luò)段。網(wǎng)絡(luò)裝置T1、T2、···、Tn例如是LAN交換機(jī)。

在實(shí)施方式1中，如圖1所示，影像監(jiān)視系統(tǒng)100具備進(jìn)行由多個監(jiān)視照相機(jī)101拍攝的影像的視點(diǎn)變換(即，俯瞰影像的生成)的多個控制服務(wù)器200。與此相對，在本實(shí)施方式中，如圖12所示，將各個控制服務(wù)器200置換為網(wǎng)絡(luò)裝置106，利用多個監(jiān)視照相機(jī)400進(jìn)行監(jiān)視影像的視點(diǎn)變換。

圖13是示出各個監(jiān)視照相機(jī)400的結(jié)構(gòu)的框圖。

在圖13中，各個監(jiān)視照相機(jī)400具備傳感器部401、處理部402、變換部403、第1編碼部404、第2編碼部405、存儲卡406、解碼部407、發(fā)送部408、接收部409和管理部410。后面敘述各部的動作。存儲卡406優(yōu)選是可拆裝的。

圖14是示出顯示服務(wù)器300的結(jié)構(gòu)的框圖。

在圖14中，顯示服務(wù)器300具備第1接收部301、第1解碼部302、顯示部303、第2接收部304、合成部306、操作部307、第1管理部308、第2管理部309、發(fā)送部310和第2解碼部311。后面敘述各部的動作。

圖15是示出影像監(jiān)視系統(tǒng)100的應(yīng)用例的圖。

在圖15中，監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1與場所P的攝影區(qū)域a～d的關(guān)系和圖4的例子是相同的。監(jiān)視照相機(jī)C1-1、C1-2、C1-3所拍攝的影像經(jīng)由網(wǎng)絡(luò)裝置T1輸出至顯示服務(wù)器300。監(jiān)視照相機(jī)C2-1所拍攝的影像經(jīng)由網(wǎng)絡(luò)裝置T2輸出至顯示服務(wù)器300。

在圖15的例子中，也是利用顯示服務(wù)器300在顯示器104上顯示與圖5所示的顯示畫面501、502或者圖6所示的顯示畫面511、513相同的畫面。

以下，說明圖15的例子中的影像監(jiān)視系統(tǒng)100的動作(本實(shí)施方式的影像監(jiān)視方法)。

首先，說明照相機(jī)控制動作。

圖16是示出由監(jiān)視員作出顯示影像的放大指示或關(guān)注指示時的顯示服務(wù)器300的動作例的流程圖。

在S701中，操作部307經(jīng)由鍵盤以及鼠標(biāo)105從監(jiān)視員接收放大指示或關(guān)注指示的操作，作為顯示控制操作。操作部307通過顯示控制操作將作為顯示對象的攝影區(qū)域的信息輸出至發(fā)送部310。

在S702中，發(fā)送部310從第1管理部308以及第2管理部309取得對攝影區(qū)域a～d進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的信息。發(fā)送部310根據(jù)在S701中輸入的信息和從第1管理部308以及第2管理部309取得的信息，選擇顯示以及非顯示監(jiān)視照相機(jī)。在圖5的放大指示的例子中，對攝影區(qū)域a、c進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-3成為非顯示監(jiān)視照相機(jī)，對攝影區(qū)域b、d進(jìn)行拍攝的監(jiān)視照相機(jī)C1-2、C2-1成為顯示監(jiān)視照相機(jī)。

在S703中，發(fā)送部310從第1管理部308取得在S702中選擇的顯示監(jiān)視照相機(jī)的設(shè)定值。在圖5的放大指示的例子中，為了放大監(jiān)視照相機(jī)C1-2、C2-1的影像，將監(jiān)視照相機(jī)C1-2、C2-1的分辨率以及幀率設(shè)定為較高的值。

在S704中，發(fā)送部310向需要進(jìn)行設(shè)定變更的監(jiān)視照相機(jī)400的接收部409輸出控制信息。在控制信息中，包含表示發(fā)送目的地的監(jiān)視照相機(jī)400在S702內(nèi)被決定為顯示以及非顯示監(jiān)視照相機(jī)中的哪個照相機(jī)的信息、在S703內(nèi)取得的設(shè)定值。在圖5的放大指示的例子中，將表示監(jiān)視照相機(jī)C1-1成為非顯示監(jiān)視照相機(jī)的控制信息發(fā)送至監(jiān)視照相機(jī)C1-1。同樣的控制信息也發(fā)送至監(jiān)視照相機(jī)C1-3。表示監(jiān)視照相機(jī)C1-2成為顯示監(jiān)視照相機(jī)、并指定監(jiān)視照相機(jī)C1-2的分辨率以及幀率的控制信息被發(fā)送至監(jiān)視照相機(jī)C1-2。同樣的控制信息也被發(fā)送至監(jiān)視照相機(jī)C2-1。

接著，說明照相機(jī)設(shè)定動作。

圖17是示出從顯示服務(wù)器300發(fā)送了控制信息時的監(jiān)視照相機(jī)C1-2的動作例的流程圖。

在S711中，接收部409接收從顯示服務(wù)器300的發(fā)送部310發(fā)送的控制信息。接收部409將所接收的控制信息輸出至管理部410。在控制信息中，包含由監(jiān)視員的操作指定的信息和預(yù)先設(shè)定的信息。在控制信息中，例如包含表示在顯示器104的畫面上顯示直播影像以及記錄影像的哪一個影像的信息。還包含表示是顯示場所P的整體的俯瞰影像、還是放大顯示一部分?jǐn)z影區(qū)域的俯瞰影像、還是顯示一部分?jǐn)z影區(qū)域的通常影像(即，變換為俯瞰影像之前的監(jiān)視影像)的信息。如在S704中發(fā)送的控制信息那樣，還存在包含表示發(fā)送目的地的監(jiān)視照相機(jī)400是顯示以及非顯示監(jiān)視照相機(jī)中的哪一個照相機(jī)的信息、以及發(fā)送目的地的監(jiān)視照相機(jī)400的設(shè)定值的情況。

在S712中，管理部410根據(jù)在S711中輸入的控制信息，針對變換部403設(shè)定俯瞰影像的視點(diǎn)變換角度、分辨率和幀率。在圖5的放大指示的例子中，將俯瞰影像的分辨率以及幀率的值設(shè)定得較高。

在S713中，接收部409根據(jù)在S711中接收的控制信息，針對第2編碼部405設(shè)定通常影像的分辨率以及幀率。

在S714中，接收部409根據(jù)在S711中接收的控制信息，控制發(fā)送部408，以停止影像的輸出、或者開始(或重新開始)影像的輸出。在圖5的放大指示的例子中，開始影像的輸出。

從顯示服務(wù)器300發(fā)送了控制信息時的監(jiān)視照相機(jī)C1-1、C1-3、C2-1的動作與圖17所示的動作相同。在圖5的放大指示的例子中，在S714中停止從監(jiān)視照相機(jī)C1-1、C1-3輸出影像，在S714中開始從監(jiān)視照相機(jī)C2-1輸出影像。

接著，說明俯瞰影像生成動作。

圖18以及圖19是示出發(fā)送了影像時的監(jiān)視照相機(jī)C1-2的動作例的流程圖。

在S721中，傳感器部401利用圖像傳感器來拍攝攝影區(qū)域b的影像。傳感器部401將所拍攝的影像輸出至處理部402。處理部402對從傳感器部401輸入的影像進(jìn)行噪聲去除等圖像處理。

在S722中，接收部409根據(jù)在S711中接收的控制信息，判定所顯示的影像是否是俯瞰影像。在顯示的影像是俯瞰影像的情況下，流程進(jìn)入S723。在顯示的影像不是俯瞰影像的情況下，流程進(jìn)入S730。

在S723中，接收部409根據(jù)在S711中接收的控制信息，切換是處理直播影像、還是處理記錄影像。在顯示的影像是直播影像的情況下，流程進(jìn)入S724。在顯示的影像是記錄影像的情況下，流程進(jìn)入S725。

在S724中，變換部403從處理部402接收在S721中處理的影像的輸入。然后，流程進(jìn)入S726。

在S725中，變換部403取得從存儲卡406讀取并由解碼部407解碼的影像。然后，流程進(jìn)入S726。

在S726中，變換部403從管理部410取得監(jiān)視照相機(jī)C1-2的視場角信息。變換部403根據(jù)所取得的視場角信息，進(jìn)行在S724或S725中取得的影像的視點(diǎn)變換，生成俯瞰影像。變換部403將所生成的俯瞰影像輸出至第1編碼部404。

在S727中，第1編碼部404對在S726中輸入的俯瞰影像進(jìn)行編碼。第1編碼部404將已編碼的俯瞰影像輸出至發(fā)送部408。

在S728中，發(fā)送部408將在S727中輸入的俯瞰影像輸出至顯示服務(wù)器300的第2接收部304。在圖5的例子中，發(fā)送攝影區(qū)域b的俯瞰影像。

在S729中，接收部409根據(jù)在S711中接收的控制信息，判定所顯示的影像是否是通常影像。在所顯示的影像是通常影像的情況下，流程進(jìn)入S730。在顯示的影像不是通常影像的情況下，流程結(jié)束。

在S730中，接收部409根據(jù)在S711中接收的控制信息，切換是處理直播影像、還是處理記錄影像。在顯示的影像是直播影像的情況下，流程進(jìn)入S731。在顯示的影像是記錄影像的情況下，流程進(jìn)入S732。

在S731中，第2編碼部405從處理部402接收在S721中處理的影像的輸入。第2編碼部405對所輸入的影像進(jìn)行編碼。第2編碼部405將所編碼的影像輸出至發(fā)送部408。然后，流程進(jìn)入S733。

在S732中，發(fā)送部408從存儲卡406取得影像。然后，流程進(jìn)入S733。

在S733中，發(fā)送部408將在S731或S732中取得的影像輸出至顯示服務(wù)器300的第1接收部301。

發(fā)送影像時的監(jiān)視照相機(jī)C1-1、C1-3、C2-1的動作與圖18以及圖19所示的動作相同。在圖5的例子中生成左側(cè)的顯示畫面501的情況下，在S728中從監(jiān)視照相機(jī)C1-1、C1-3、C2-1發(fā)送攝影區(qū)域a、c、d的俯瞰影像。在生成右側(cè)的顯示畫面502的情況下，只是在S728中從監(jiān)視照相機(jī)C2-1發(fā)送攝影區(qū)域d的俯瞰影像，不發(fā)送攝影區(qū)域a、c的俯瞰影像。

圖20是示出從顯示監(jiān)視照相機(jī)發(fā)送了影像時的顯示服務(wù)器300的動作例的流程圖。

在S741中，在顯示的影像是通常影像的情況下，第1接收部301從顯示監(jiān)視照相機(jī)的發(fā)送部408接收影像。第1接收部301將所接收的影像輸出至第1解碼部302。然后，流程進(jìn)入S742。在所顯示的影像不是通常影像的情況下，流程進(jìn)入S744。

在S742中，第1解碼部302對在S741中輸入的影像進(jìn)行解碼。第1解碼部302將所解碼的影像輸出至顯示部303。

在S743中，顯示部303在顯示器104上顯示S742中輸入的影像。

在S744中，在顯示的影像是俯瞰影像的情況下，流程進(jìn)入S745。在顯示的影像不是俯瞰影像的情況下，流程結(jié)束。

在S745中，第2接收部304從顯示監(jiān)視照相機(jī)的發(fā)送部408接收影像。第2接收部304將所接收的影像輸出至第2解碼部311。

在S746中，第2解碼部311對在S745中輸入的影像進(jìn)行解碼。第2解碼部311將已解碼的影像輸出至合成部306。

在S747中，合成部306從第1管理部308取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的位置信息。合成部306從第2管理部309取得地圖信息。合成部306根據(jù)所取得的位置信息以及地圖信息，合成在S746中輸入的影像。合成部306將所合成的影像輸出至顯示部303。在圖5的例子中生成左側(cè)的顯示畫面501的情況下，執(zhí)行監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的俯瞰影像的合成處理。在生成右側(cè)的顯示畫面502的情況下，執(zhí)行監(jiān)視照相機(jī)C1-2、C2-1的俯瞰影像的合成處理。

在S748中，顯示部303在顯示器104上顯示S747中輸入的影像。

如上所述，在本實(shí)施方式中，在監(jiān)視照相機(jī)400側(cè)執(zhí)行生成俯瞰影像的處理。與實(shí)施方式1同樣，在顯示場所P的整體的俯瞰影像的情況下，抑制監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的分辨率以及幀率。因此，不壓迫網(wǎng)絡(luò)頻帶就能將影像發(fā)送至顯示服務(wù)器300。由此，可構(gòu)建既不需要實(shí)施方式1那樣的控制服務(wù)器200的導(dǎo)入、又能提供俯瞰大規(guī)模的購物中心、游樂園、車站的站臺或站內(nèi)的通路等需要幾千臺以上的監(jiān)視照相機(jī)400的場所整體的影像的系統(tǒng)。

在本實(shí)施方式中，與實(shí)施方式1相同，在放大俯瞰影像、或顯示關(guān)注點(diǎn)或顯示通常影像的情況下，使對未顯示的區(qū)域進(jìn)行拍攝的監(jiān)視照相機(jī)400的影像的輸出停止，并且將對顯示的區(qū)域進(jìn)行拍攝的監(jiān)視照相機(jī)400的分辨率以及幀率設(shè)定得較高。因此，關(guān)于需要密切監(jiān)視的區(qū)域，能夠在顯示器104上顯示更鮮明的影像。

在本實(shí)施方式中，影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300內(nèi)具備第1接收部301和第2接收部304作為接收部。接收部與實(shí)施方式1同樣地從分別對某場所P的多個區(qū)域(在圖5的例子中是攝影區(qū)域a～d)中的各個區(qū)域的影像進(jìn)行拍攝的多個監(jiān)視照相機(jī)400(在圖5的例子中是監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1)接收所拍攝的影像。

影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300上具備顯示部303和合成部306作為控制部?？刂撇颗c實(shí)施方式1同樣地進(jìn)行在畫面(例如，顯示器104的畫面)上顯示由接收部接收的影像的控制。

影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300內(nèi)具備操作部307。操作部307與實(shí)施方式1同樣地受理指定上述多個區(qū)域中的一部分區(qū)域(在圖5的放大指示的例子中是攝影區(qū)域b、d)的操作(例如，顯示控制操作)。

影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300內(nèi)具備第1管理部308、第2管理部309和發(fā)送部310作為指示部。指示部與實(shí)施方式1同樣地在利用控制部在畫面上顯示上述多個區(qū)域的影像的情況下，指示多個監(jiān)視照相機(jī)400以第1形式發(fā)送所拍攝的影像。指示部在利用控制部在畫面上顯示對操作部307指定的區(qū)域的影像的情況下，指示拍攝該指定的區(qū)域的影像的監(jiān)視照相機(jī)400(在圖5的放大指示的例子中是監(jiān)視照相機(jī)C1-2、C2-1)以數(shù)據(jù)量比第1形式多的第2形式發(fā)送所拍攝的影像。

根據(jù)本實(shí)施方式，利用上述這樣的動作，與實(shí)施方式1同樣地能夠削減發(fā)送多個監(jiān)視照相機(jī)400拍攝的影像所需的通信頻帶，而不會給影像監(jiān)視的業(yè)務(wù)帶來障礙。

在本實(shí)施方式中，接收部從多個監(jiān)視照相機(jī)400分別接收與從正上方俯視上述各個區(qū)域的影像相當(dāng)?shù)母╊跋?例如，攝影區(qū)域a～d的各個俯瞰影像)。

在畫面上顯示上述多個區(qū)域的影像的情況下，控制部進(jìn)行以下這樣的控制：合成由接收部接收的俯瞰影像，生成場所P的整體的俯瞰影像，在畫面上顯示所生成的俯瞰影像。

在本實(shí)施方式中，因?yàn)槎鄠€監(jiān)視照相機(jī)400分別生成俯瞰影像，所以能夠節(jié)省導(dǎo)入實(shí)施方式1這樣的控制服務(wù)器200的麻煩以及成本。

實(shí)施方式3.

關(guān)于本實(shí)施方式，主要說明與實(shí)施方式2的差異。

本實(shí)施方式的影像監(jiān)視系統(tǒng)100的結(jié)構(gòu)與圖12所示的實(shí)施方式2的結(jié)構(gòu)相同。

在實(shí)施方式2中，多個監(jiān)視照相機(jī)400進(jìn)行監(jiān)視影像的視點(diǎn)變換。與此相對，在本實(shí)施方式中，在顯示寬范圍的俯瞰影像的情況下，取代顯示視點(diǎn)變換后的照相機(jī)影像，而顯示使各個監(jiān)視照相機(jī)400檢測出的人物的圖像與背景圖像重合而成的影像。根據(jù)由各個監(jiān)視照相機(jī)400檢測出的人物的位置坐標(biāo)等元數(shù)據(jù)(metadata)和顯示服務(wù)器300管理的地圖信息，生成該影像。通過顯示這樣的影像，能夠進(jìn)行對網(wǎng)絡(luò)更加沒有負(fù)擔(dān)的影像監(jiān)視。

在本實(shí)施方式中，監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m從拍攝的影像中檢測人或該人的面部。另外，監(jiān)視照相機(jī)C1-1、C1-2、···、C1-m將取得了人的面部正面或與正面最接近的角度的影像作為最佳拍攝而記錄。

圖21是示出各個監(jiān)視照相機(jī)400的結(jié)構(gòu)的框圖。

在圖21中，各個監(jiān)視照相機(jī)400具備傳感器部401、處理部402、變換部403、第1編碼部404、第2編碼部405、存儲卡406、解碼部407、發(fā)送部408、接收部409、管理部410、檢測部411和判定部412。后面敘述各部的動作。

圖22是示出顯示服務(wù)器300的結(jié)構(gòu)的框圖。

在圖22中，顯示服務(wù)器300具備第1接收部301、第1解碼部302、顯示部303、第2接收部304、合成部306、操作部307、第1管理部308、第2管理部309、發(fā)送部310、第2解碼部311、提取部312、變換部313、第1生成部314、第4接收部315、計算部316和第2生成部317。后面敘述各部的動作。

在本實(shí)施方式中，能夠與圖15的例子同樣地應(yīng)用影像監(jiān)視系統(tǒng)100。

以下，說明圖15的例子中的顯示服務(wù)器300的畫面顯示。

圖23是示出顯示服務(wù)器300的畫面顯示例的圖。

在圖23中，左側(cè)的顯示畫面521是在顯示器104上顯示的場所P的整體的俯瞰影像。在為了警備等而始終對監(jiān)視影像進(jìn)行監(jiān)視的監(jiān)視員使用顯示服務(wù)器300的鍵盤以及鼠標(biāo)105作出顯示整體影像的指示時，生成在場所P的背景圖像上重疊了在場所P中移動的人物的面部圖像后的俯瞰影像(以下，也稱為“背景合成影像”)，在畫面上顯示生成的俯瞰影像。

右側(cè)的顯示畫面502是在顯示器104上顯示的攝影區(qū)域b、d(的一部分)的俯瞰影像。在監(jiān)視員使用顯示服務(wù)器300的鍵盤以及鼠標(biāo)105作出對顯示畫面501的中心部進(jìn)行放大顯示的指示(即，放大指示)時，在畫面上顯示通過照相機(jī)影像的視點(diǎn)變換而獲得的攝影區(qū)域b、d的俯瞰影像(以下，也稱為“視點(diǎn)變換影像”)。

以下，說明圖15的例子中的影像監(jiān)視系統(tǒng)100的動作(本實(shí)施方式的影像監(jiān)視方法)。

首先，說明照相機(jī)控制動作。

圖24是示出由監(jiān)視員作出了顯示影像的放大指示或關(guān)注指示時的顯示服務(wù)器300的動作例的流程圖。

在S801中，操作部307經(jīng)由鍵盤以及鼠標(biāo)105從監(jiān)視員受理放大指示或關(guān)注指示的操作作為顯示控制操作。操作部307通過顯示控制操作將作為顯示對象的攝影區(qū)域的信息輸出至發(fā)送部310。在顯示控制操作中，可選擇通常影像、視點(diǎn)變換影像和背景合成影像的任意影像，作為在顯示器104上顯示的影像的種類。此外，在顯示場所P的整體的影像的情況下，優(yōu)選的是，不能選擇通常影像。在顯示場所P的整體影像的情況下，優(yōu)選的是，也不能選擇視點(diǎn)變換影像。在顯示控制操作中，指定顯示場所P的哪個范圍，所以，可根據(jù)所指定的范圍，自動地選擇顯示的影像的種類。

在S802中，發(fā)送部310從第1管理部308以及第2管理部309取得對攝影區(qū)域a～d進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的信息。發(fā)送部310根據(jù)在S801中輸入的信息和從第1管理部308以及第2管理部309取得的信息，選擇顯示以及非顯示監(jiān)視照相機(jī)。在圖23的放大指示的例子中，對攝影區(qū)域a、c進(jìn)行拍攝的監(jiān)視照相機(jī)C1-1、C1-3成為非顯示監(jiān)視照相機(jī)，對攝影區(qū)域b、d進(jìn)行拍攝的監(jiān)視照相機(jī)C1-2、C2-1成為顯示監(jiān)視照相機(jī)。

在S803中，發(fā)送部310從第1管理部308取得在S802中選擇的顯示監(jiān)視照相機(jī)的設(shè)定值。在圖23的放大指示的例子中，為了放大監(jiān)視照相機(jī)C1-2、C2-1的影像，將監(jiān)視照相機(jī)C1-2、C2-1的分辨率以及幀率設(shè)定為較高的值。

在S804中，發(fā)送部310向需要進(jìn)行設(shè)定變更的監(jiān)視照相機(jī)400的接收部409輸出控制信息。在控制信息中，包含表示在S802中將發(fā)送目的地的監(jiān)視照相機(jī)400決定為顯示以及非顯示監(jiān)視照相機(jī)中的哪一個照相機(jī)的信息、和在S803中取得的設(shè)定值。在圖23的放大指示的例子中，將表示監(jiān)視照相機(jī)C1-1成為非顯示監(jiān)視照相機(jī)的控制信息發(fā)送至監(jiān)視照相機(jī)C1-1。將同樣的控制信息也發(fā)送至監(jiān)視照相機(jī)C1-3。將表示監(jiān)視照相機(jī)C1-2成為顯示監(jiān)視照相機(jī)并指定監(jiān)視照相機(jī)C1-2的分辨率以及幀率的控制信息發(fā)送至監(jiān)視照相機(jī)C1-2。將同樣的控制信息也發(fā)送至監(jiān)視照相機(jī)C2-1。

在S805中，在S801中選擇出的影像的種類是背景合成影像的情況下，流程進(jìn)入S806。在S801中選擇出的影像的種類是視點(diǎn)變換影像的情況下，流程進(jìn)入S808。

在S806中，發(fā)送部310對需要進(jìn)行設(shè)定變更的監(jiān)視照相機(jī)400的接收部409輸出追加的控制信息。在追加的控制信息中，包含這樣的信息，該信息指示發(fā)送檢測移動中的人物的面部而得到的坐標(biāo)、和最佳地拍攝出面部的最佳拍攝圖像。

在S807中，第1管理部308指示變換部313以及計算部316執(zhí)行處理，指示合成部306停止處理。

在S808中，發(fā)送部310對需要進(jìn)行設(shè)定變更的監(jiān)視照相機(jī)400的接收部409輸出追加的控制信息。在追加的控制信息中包含指示發(fā)送視點(diǎn)變換影像的信息。

在S809中，第1管理部308指示合成部306執(zhí)行處理，指示變換部313以及計算部316停止處理。

接著，說明照相機(jī)設(shè)定動作。

圖25是示出從顯示服務(wù)器300發(fā)送了控制信息時的監(jiān)視照相機(jī)C1-2的動作例的流程圖。

在S811中，接收部409接收從顯示服務(wù)器300的發(fā)送部310發(fā)送的控制信息。接收部409將所接收的控制信息輸出至管理部410。在控制信息中，包含通過監(jiān)視員的操作而指定的信息和預(yù)先設(shè)定的信息。在控制信息中，例如包含表示在顯示器104的畫面上顯示直播影像以及記錄影像中的哪個影像的信息。還包含是表示顯示場所P的整體的俯瞰影像、還是放大顯示一部分?jǐn)z影區(qū)域的俯瞰影像、還是顯示一部分?jǐn)z影區(qū)域的通常影像(即，變換為俯瞰影像之前的監(jiān)視影像)的信息。如在S804中發(fā)送的控制信息的那樣，還具有包含表示發(fā)送目的地的監(jiān)視照相機(jī)400是顯示以及非顯示監(jiān)視照相機(jī)中的哪一個照相機(jī)的信息、和發(fā)送目的地的監(jiān)視照相機(jī)400的設(shè)定值的情況。還具有包含S806或S808中發(fā)送的追加的控制信息的情況。

在S812中，管理部410根據(jù)在S811中輸入的控制信息，針對變換部403設(shè)定俯瞰影像的視點(diǎn)變換角度、分辨率和幀率。在圖23的放大指示的例子中，將俯瞰影像的分辨率以及幀率的值設(shè)定得較高。

在S813中，接收部409根據(jù)在S811中接收到的控制信息，針對第2編碼部405設(shè)定通常影像的分辨率以及幀率。

在S814中，管理部410根據(jù)在S811中輸入的控制信息，判定所指定的影像的種類是背景合成影像、視點(diǎn)變換影像和通常影像中的哪個影像。在所指定的影像的種類是背景合成影像的情況下，流程進(jìn)入S815。在所指定的影像的種類是視點(diǎn)變換影像的情況下，流程進(jìn)入S816。在所指定的影像的種類是通常影像的情況下，流程進(jìn)入S817。

在S815中，管理部410指示檢測部411執(zhí)行面部檢測處理。然后，流程進(jìn)入S817。

在S816中，管理部410指示變換部403執(zhí)行視點(diǎn)變換處理。然后，流程進(jìn)入S817。

在S817中，接收部409根據(jù)在S811中接收到的控制信息，控制發(fā)送部408，以停止影像的輸出或者開始(或重新開始)影像的輸出。在圖23的放大指示的例子中，開始影像的輸出。

從顯示服務(wù)器300發(fā)送了控制信息時的監(jiān)視照相機(jī)C1-1、C1-3、C2-1的動作與圖25所示的動作相同。在圖23的放大指示的例子中，在S817中停止從監(jiān)視照相機(jī)C1-1、C1-3輸出影像，在S817中開始從監(jiān)視照相機(jī)C2-1輸出影像。

接著，說明俯瞰影像生成動作。

圖26以及圖27是示出發(fā)送影像時的監(jiān)視照相機(jī)C1-2的動作例的流程圖。

在S821中，傳感器部401利用圖像傳感器對攝影區(qū)域b的影像進(jìn)行攝影。傳感器部401將所拍攝的影像輸出至處理部402。處理部402對從傳感器部401輸入的影像進(jìn)行噪聲去除等圖像處理。

在S822中，接收部409根據(jù)在S811中接收到的控制信息，判定所顯示的影像是否是背景合成影像。在顯示的影像是背景合成影像的情況下，流程進(jìn)入S823。在顯示的影像不是背景合成影像的情況下，流程進(jìn)入S829。

在S823中，接收部409根據(jù)在S811中接收到的控制信息，切換是使用直播影像、還是使用記錄影像。在所顯示的影像是直播影像的情況下，流程進(jìn)入S824。在顯示的影像是記錄影像的情況下，流程進(jìn)入S825。

在S824中，檢測部411從處理部402接收在S821中處理的影像的輸入。然后，流程進(jìn)入S826。

在S825中，檢測部411取得從存儲卡406讀取并由解碼部407解碼的影像。然后，流程進(jìn)入S826。

在S826中，檢測部411從在S824或S825中取得的影像中檢測人物的面部，將顯現(xiàn)出面部的坐標(biāo)與面部的圖像一起輸出至判定部412。

在S827中，判定部412將在S826中輸入的面部的圖像作為最佳拍攝圖像進(jìn)行記錄。之后，每當(dāng)在S826中輸入面部的圖像時，如果該圖像是以比記錄的最佳拍攝圖像更接近于正面的角度拍攝的圖像，則判定部412改寫所記錄的最佳拍攝圖像。判定部412將面部的坐標(biāo)和最佳拍攝圖像輸出至發(fā)送部408。

在S828中，發(fā)送部408將在S827中輸入的面部的坐標(biāo)和最佳拍攝圖像輸出至顯示服務(wù)器300的第4接收部315。在圖23的放大指示前的例子中，發(fā)送在攝影區(qū)域b檢測的人物的面部的坐標(biāo)和最佳拍攝圖像。

在S829中，接收部409根據(jù)在S811中接收到的控制信息，判定所顯示的影像是否是視點(diǎn)變換影像。在顯示的影像是視點(diǎn)變換影像的情況下，流程進(jìn)入S830。在顯示的影像不是視點(diǎn)變換影像的情況下，流程進(jìn)入S836。

在S830中，接收部409根據(jù)在S811中接收到的控制信息，切換是處理直播影像、還是處理記錄影像。在顯示的影像是直播影像的情況下，流程進(jìn)入S831。在顯示的影像是記錄影像的情況下，流程進(jìn)入S832。

在S831中，變換部403從處理部402接收在S821中處理的影像的輸入。然后，流程進(jìn)入S833。

在S832中，變換部403取得從存儲卡406讀取并由解碼部407解碼的影像。然后，流程進(jìn)入S833。

在S833中，變換部403從管理部410取得監(jiān)視照相機(jī)C1-2的視場角信息。變換部403根據(jù)所取得的視場角信息，進(jìn)行在S831或S832中取得的影像的視點(diǎn)變換，生成視點(diǎn)變換影像。變換部403將所生成的視點(diǎn)變換影像輸出至第1編碼部404。

在S834中，第1編碼部404對在S833中輸入的視點(diǎn)變換影像進(jìn)行編碼。第1編碼部404將編碼后的視點(diǎn)變換影像輸出至發(fā)送部408。

在S835中，發(fā)送部408將在S834中輸入的視點(diǎn)變換影像輸出至顯示服務(wù)器300的第2接收部304。在圖23的放大指示后的例子中，發(fā)送攝影區(qū)域b的視點(diǎn)變換影像。

在S836中，接收部409根據(jù)在S811中接收到的控制信息，來判定所顯示的影像是否是通常影像。在顯示的影像是通常影像的情況下，流程進(jìn)入S837。在所顯示的影像不是通常影像的情況下，流程結(jié)束。

在S837中，接收部409根據(jù)在S811中接收到的控制信息，切換是處理直播影像、還是處理記錄影像。在顯示的影像是直播影像的情況下，流程進(jìn)入S838。在顯示的影像是記錄影像的情況下，流程進(jìn)入S839。

在S838中，第2編碼部405從處理部402接收在S821中處理的影像的輸入。第2編碼部405對所輸入的影像進(jìn)行編碼。第2編碼部405將所編碼的影像輸出至發(fā)送部408。然后，流程進(jìn)入S840。

在S839中，發(fā)送部408從存儲卡406取得影像。然后，流程進(jìn)入S840。

在S840中，發(fā)送部408將在S838或S839中取得的影像輸出至顯示服務(wù)器300的第1接收部301。

發(fā)送影像時的監(jiān)視照相機(jī)C1-1、C1-3、C2-1的動作與圖26以及圖27所示的動作相同。在圖23的例子中生成左側(cè)的顯示畫面521的情況下，在S828中從監(jiān)視照相機(jī)C1-1、C1-3、C2-1發(fā)送在攝影區(qū)域a、c、d內(nèi)檢測出的人物的面部的坐標(biāo)和最佳拍攝圖像。在生成右側(cè)的顯示畫面522的情況下，只是在S835中從監(jiān)視照相機(jī)C2-1發(fā)送攝影區(qū)域d的視點(diǎn)變換影像，不發(fā)送攝影區(qū)域a、c的視點(diǎn)變換影像。

圖28以及圖29是示出從顯示監(jiān)視照相機(jī)發(fā)送了影像時的顯示服務(wù)器300的動作例的流程圖。

在S851中，在顯示的影像是通常影像的情況下，第1接收部301從顯示監(jiān)視照相機(jī)的發(fā)送部408接收影像。第1接收部301將所接收的影像輸出至第1解碼部302。然后，流程進(jìn)入S852。在所顯示的影像不是通常影像的情況下，流程進(jìn)入S854。

在S852中，第1解碼部302對在S851中輸入的影像進(jìn)行解碼。第1解碼部302將所解碼的影像輸出至顯示部303。

在S853中，顯示部303將在S852中輸入的影像顯示在顯示器104上。

在S854中，在顯示的影像是視點(diǎn)變換影像的情況下，流程進(jìn)入S855。在顯示的影像不是視點(diǎn)變換影像的情況下，流程進(jìn)入S859。

在S855中，第2接收部304從顯示監(jiān)視照相機(jī)的發(fā)送部408接收影像。第2接收部304將所接收的影像輸出至第2解碼部311。

在S856中，第2解碼部311對在S855中輸入的影像進(jìn)行解碼。第2解碼部311將所解碼的影像輸出至合成部306。

在S857中，合成部306從第1管理部308取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的位置信息。合成部306從第2管理部309取得地圖信息。合成部306根據(jù)所取得的位置信息以及地圖信息，合成在S856中輸入的影像。合成部306將所合成的影像輸出至顯示部303。在圖23的例子中生成右側(cè)的顯示畫面522的情況下，執(zhí)行監(jiān)視照相機(jī)C1-2、C2-1的視點(diǎn)變換影像的合成處理。

在S858中，顯示部303將在S857中輸入的影像顯示在顯示器104上。

在S859中，在顯示的影像是背景合成影像的情況下，流程進(jìn)入S860。在顯示的影像不是背景合成影像的情況下，流程結(jié)束。

在S860中，提取部312從第1解碼部302接收監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1(或者，與顯示范圍對應(yīng)的監(jiān)視照相機(jī)400)的通常影像的輸入。提取部312去除所輸入的通常影像相對于過去的變化部分(即，差分)，提取背景圖像。提取部312將所提取的背景圖像輸出至變換部313。

在S861中，變換部313從第1管理部308取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的位置信息。變換部313從第2管理部309取得地圖信息。變換部313根據(jù)所取得的位置信息以及地圖信息，進(jìn)行在S860中輸入的背景圖像的視點(diǎn)變換。變換部313將視點(diǎn)變換后的背景圖像輸出至第1生成部314。

在S862中，第1生成部314合成在S861中輸入的監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的背景圖像，生成場所P的整體的背景圖像。第1生成部314將所生成的背景圖像輸出至第2生成部317。

在S863中，第4接收部315從監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的發(fā)送部408接收面部的坐標(biāo)和最佳拍攝圖像。第4接收部315將所接收的面部的坐標(biāo)和最佳拍攝圖像輸出至計算部316。

在S864中，計算部316從第1管理部308取得監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的位置信息。計算部316從第2管理部309取得地圖信息。計算部316根據(jù)所取得的位置信息以及地圖信息，基于在S863中輸入的面部的坐標(biāo)，計算使最佳拍攝圖像與背景圖像重疊的坐標(biāo)。計算部316將所算出的坐標(biāo)和在S863中輸入的最佳拍攝圖像輸出至第2生成部317。

在S865中，第2生成部317在S862中輸入的場所P的整體的背景圖像中的、S864中輸入的坐標(biāo)處，合成在S864中輸入的最佳拍攝圖像，生成背景合成影像。第2生成部317將所生成的背景合成影像輸出至顯示部303。在圖23的例子中生成左側(cè)的顯示畫面521的情況下，生成場所P的整體的背景合成影像。

在S866中，顯示部303將S865中輸入的影像顯示在顯示器104上。

如上所述，在本實(shí)施方式中，在顯示場所P的整體的俯瞰影像的情況下，不是輸出監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1的影像，而是僅輸出在通過照相機(jī)內(nèi)的圖像處理而檢測出的人(或面部)的位置處顯示面部的最佳拍攝的影像。因此，能夠大幅抑制網(wǎng)絡(luò)頻帶的使用率。由此，可構(gòu)建提供俯瞰需要幾千臺以上的監(jiān)視照相機(jī)的場所整體的影像的系統(tǒng)。

本實(shí)施方式與實(shí)施方式2相同，在放大俯瞰影像、或顯示關(guān)注點(diǎn)、或顯示通常影像的情況下，停止對不顯示的區(qū)域進(jìn)行拍攝的監(jiān)視照相機(jī)400的影像的輸出，并且將對所顯示的區(qū)域進(jìn)行拍攝的監(jiān)視照相機(jī)400的分辨率以及幀率設(shè)定得較高。因此，關(guān)于需要密切監(jiān)視的區(qū)域，可在顯示器104上顯示更鮮明的影像。

在本實(shí)施方式中，影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300內(nèi)具備第1接收部301、第2接收部304和第4接收部315作為接收部。接收部與實(shí)施方式2同樣地從對某場所P的多個區(qū)域(在圖23的例子中是攝影區(qū)域a～d)中的各個區(qū)域的影像分別拍攝的多個監(jiān)視照相機(jī)400(在圖23的例子中是監(jiān)視照相機(jī)C1-1、C1-2、C1-3、C2-1)接收所拍攝的影像。另外，接收部從多個監(jiān)視照相機(jī)400接收表示位于場所P的人物的位置的信息。

影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300內(nèi)具備提取部312、變換部313和第1生成部314作為生成部。生成部根據(jù)接收部接收到的影像，生成與去除位于場所P的人物后的場所P的整體圖像相當(dāng)?shù)谋尘皥D像。

影像監(jiān)視系統(tǒng)100在顯示服務(wù)器300內(nèi)具備顯示部303和合成部306作為控制部。在畫面(例如顯示器104的畫面)上顯示上述多個區(qū)域的影像的情況下，控制部進(jìn)行以下這樣的控制：生成在由生成部生成的背景圖像中的由接收部接收到的信息表示的位置處重疊識別處于場所P的人物的識別圖像而得到的影像，在畫面上顯示所生成的影像。

根據(jù)本實(shí)施方式，利用上述這樣的動作，能夠進(jìn)一步削減發(fā)送由多個監(jiān)視照相機(jī)400拍攝的影像所需的通信頻帶。

在本實(shí)施方式中，接收部從多個監(jiān)視照相機(jī)400接收表示位于場所P的人物的位置的信息，但顯示服務(wù)器300的計算部316也可以根據(jù)接收部接收到的影像，計算位于場所P的人物的位置。這樣，在畫面上顯示上述多個區(qū)域的影像的情況下，控制部可生成在生成部生成的背景圖像中的由計算部316算出的位置上重疊識別位于場所P的人物的識別圖像而得到的影像。

在本實(shí)施方式中，接收部從多個監(jiān)視照相機(jī)400接收位于場所P的人物的面部的圖像作為識別圖像，但控制部也可以從接收部所接收到的影像中提取位于場所P的人物的面部的圖像作為識別圖像。

圖30是示出本發(fā)明的實(shí)施方式的影像監(jiān)視系統(tǒng)100的各裝置(即，監(jiān)視照相機(jī)101、控制服務(wù)器200、顯示服務(wù)器300)的硬件結(jié)構(gòu)例的圖。

在圖30中，影像監(jiān)視系統(tǒng)100的各裝置的整體或一部分是計算機(jī)，具備輸出裝置910、輸入裝置920、存儲裝置930、處理裝置940這些硬件。硬件被各裝置的各部(在本發(fā)明的實(shí)施方式的說明中作為“部”說明的部件)利用。

輸出裝置910例如是LCD(Liquid·Crystal·Display)等顯示裝置、打印機(jī)、通信模塊(通信電路等)。輸出裝置910是供在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件在數(shù)據(jù)、信息、信號的輸出(發(fā)送)中使用的。前述的顯示器104是輸出裝置910的例子。

輸入裝置920例如是鍵盤、鼠標(biāo)、觸摸面板、通信模塊(通信電路等)。輸入裝置920是供在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件在數(shù)據(jù)、信息、信號的輸入(接收)中使用的。前述的鍵盤以及鼠標(biāo)105是輸入裝置920的例子。如果顯示器104是觸摸面板，則顯示器104也是輸入裝置920的例子。

存儲裝置930例如是ROM(Read·Only·Memory)、RAM(Random·Access·Memory)、HDD(Hard·Disk·Drive)、SSD(Solid·State·Drive)。在存儲裝置930中存儲有程序931、文件932。在程序931中，含有執(zhí)行在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件的處理(功能)的程序。在文件932中，含有供在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件進(jìn)行運(yùn)算、加工、讀取、寫入、利用、輸入、輸出等的數(shù)據(jù)、信息、信號(值)等。前述的硬盤203(或記錄介質(zhì))和存儲卡406是存儲裝置930的例子。

處理裝置940例如是CPU(Central·Processing·Unit)。處理裝置940經(jīng)由總線等與其它硬件設(shè)備連接而控制這些硬件設(shè)備。處理裝置940從存儲裝置930中讀出程序931，并執(zhí)行程序931。處理裝置940供在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件進(jìn)行運(yùn)算、加工、讀取、寫入、利用、輸入、輸出等。

在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件可以是將“部”改讀為“電路”、“裝置”、“設(shè)備”。另外，在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件可以是將“部”改讀為“步驟”、“順序”、“處理”。即，在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件可通過僅是軟件、僅是硬件或者軟件與硬件的組合來實(shí)現(xiàn)。軟件作為程序931存儲于存儲裝置930內(nèi)。程序931使計算機(jī)作為在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件而發(fā)揮功能?；蛘撸绦?31使計算機(jī)執(zhí)行在本發(fā)明實(shí)施方式的說明中作為“部”說明的部件的處理。

以上，雖然說明了本發(fā)明的實(shí)施方式，但也可以組合這些實(shí)施方式中的幾個實(shí)施方式而實(shí)施。或者，也可以部分地實(shí)施這些實(shí)施方式中的任意1個或幾個。例如，也可以僅采用在這些實(shí)施方式的說明中作為“部”說明的部件中的任意一個，或者采用幾個任意的組合。此外，本發(fā)明不被這些實(shí)施方式限定，可根據(jù)需要進(jìn)行各種變更。

標(biāo)號說明

100影像監(jiān)視系統(tǒng)，101監(jiān)視照相機(jī)，102LAN，103LAN，104顯示器，105鍵盤以及鼠標(biāo)，106網(wǎng)絡(luò)裝置，200控制服務(wù)器，201第1接收部，202第2接收部，203硬盤，204切換部，205第1發(fā)送部，206解碼部，207生成部，208第2發(fā)送部，209合成部，210第3發(fā)送部，211第3接收部，212管理部，213輸出部，300顯示服務(wù)器，301第1接收部，302第1解碼部，303顯示部，304第2接收部，305第3接收部，306合成部，307操作部，308第1管理部，309第2管理部，310發(fā)送部，311第2解碼部，312提取部，313變換部，314第1生成部，315第4接收部，316計算部，317第2生成部，400監(jiān)視照相機(jī)，401傳感器部，402處理部，403變換部，404第1編碼部，405第2編碼部，406存儲卡，407解碼部，408發(fā)送部，409接收部，410管理部，411檢測部，412判定部，501顯示畫面，502顯示畫面，511顯示畫面，512關(guān)注位置，513顯示畫面，521顯示畫面，522顯示畫面，910輸出裝置，920輸入裝置，930存儲裝置，931程序，932文件，940處理裝置。