JP6802864B2 - 監視装置、監視方法、及び、コンピュータプログラム - Google Patents
監視装置、監視方法、及び、コンピュータプログラム Download PDFInfo
- Publication number
- JP6802864B2 JP6802864B2 JP2019014367A JP2019014367A JP6802864B2 JP 6802864 B2 JP6802864 B2 JP 6802864B2 JP 2019014367 A JP2019014367 A JP 2019014367A JP 2019014367 A JP2019014367 A JP 2019014367A JP 6802864 B2 JP6802864 B2 JP 6802864B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- video
- monitoring
- window
- square
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims description 81
- 238000012806 monitoring device Methods 0.000 title claims description 27
- 238000000034 method Methods 0.000 title description 10
- 238000004590 computer program Methods 0.000 title description 6
- 240000004050 Pentaglottis sempervirens Species 0.000 claims description 17
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 claims description 17
- 238000010586 diagram Methods 0.000 claims description 17
- 238000004091 panning Methods 0.000 claims description 2
- 230000009466 transformation Effects 0.000 claims description 2
- 238000003860 storage Methods 0.000 description 10
- 230000001131 transforming effect Effects 0.000 description 6
- 238000009826 distribution Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
- Studio Devices (AREA)
Description
本開示は、監視装置、監視方法、及び、コンピュータプログラムに関する。
所定の建物内に設置された各監視カメラが撮影した映像を、ネットワークを通じて受信し、ディスプレイに表示する監視システムが知られている。特許文献１には、各監視カメラが撮影した映像を１枚の映像に合成して表示することにより、全体の状況を容易に監視できる監視システムが開示されている。
特許文献１のように、複数の映像を１枚の映像に合成して表示する場合、全体の状況を容易に監視できるものの、監視カメラと映像との関係が判りにくく、個々の映像に対する操作が煩雑になってしまう。
本開示の目的は、監視カメラが設置されている監視エリアの状況を容易に把握でき、かつ、個々の映像を容易に操作できる監視装置、監視方法及びコンピュータプログラムを提供することにある。
本開示の一実施例に係る監視装置は、複数の監視カメラが撮影した俯瞰視点の魚眼映像を受信する受信部と、前記魚眼映像を、前記俯瞰視点の方形の映像である方形映像、又は、前記俯瞰視点とは異なる視点の映像である別視点映像に変形する映像変形部と、前記複数の監視カメラにそれぞれ対応する複数の映像ウィンドウを配置し、前記映像ウィンドウに前記方形映像を表示し、前記映像ウィンドウ毎に表示映像を前記別視点映像に切り替えるためのＵＩ（User Interface）を提供する制御部と、を備える。
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラム、または、記録媒体で実現されてもよく、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。
本開示の一実施例によれば、監視カメラが設置されている監視エリアの状況を容易に把握でき、かつ、個々の映像を容易に操作できる。
本開示の一実施例における更なる利点および効果は、明細書および図面から明らかにされる。かかる利点および／または効果は、いくつかの実施形態並びに明細書および図面に記載された特徴によってそれぞれ提供されるが、１つまたはそれ以上の同一の特徴を得るために必ずしも全てが提供される必要はない。
（一実施の形態）
以下、図面を適宜参照して、一実施の形態について、詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
以下、図面を適宜参照して、一実施の形態について、詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
＜監視システム＞
図１は、一実施の形態に係る監視システムの構成例を示す。
図１は、一実施の形態に係る監視システムの構成例を示す。
図１に示すように、監視システム１は、複数の監視カメラ２、レコーダ３、操作装置４、及び、監視装置１０を備える。複数の監視カメラ２、レコーダ３、操作装置４、及び、監視装置１０は、ネットワークＮに接続される。ネットワークＮは、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）又はそれらの組み合わせであってよい。また、ネットワークＮは、有線ネットワーク又は無線ネットワークの何れであってもよい。
監視カメラ２は、例えば天井のような高所に設置され、俯瞰視点（例えば下方）の映像を撮影する。監視カメラ２は、魚眼カメラ又は全方位カメラのように、広視野角を撮像可能なレンズを備えてよい。すなわち、監視カメラ２で撮影される映像は、魚眼映像であってよい。監視カメラ２は、撮影した映像を、ネットワークＮを通じてレコーダ３及び／又は監視装置１０に送信する。
レコーダ３は、監視カメラ２から送信された映像を、所定のストレージに記録（録画）する。ストレージは、例えば、ＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive）等である。
操作装置４は、監視者が監視装置１０を操作するための装置である。監視装置４は、例えば、キーボード、マウス、タッチパッド、及び／又は、操作スティックであってよい。
監視装置１０は、各監視カメラ２又はレコーダ３から受信した映像を含む監視用ＵＩ（User Interface）を生成し、ディスプレイに表示する。監視用ＵＩに含まれる映像は、監視カメラ２から受信した映像（以下「オリジナル映像」という）を変形させた映像（以下「変形映像」という）であってよい。監視用ＵＩ及び変形映像については後述する。
また、監視装置１０は、監視用ＵＩに、監視カメラ２の監視エリアにおける図（以下「監視エリア図」という）を含めてもよい。また、監視装置１０は、操作装置４から、監視用ＵＩに対する操作を受け付けてよい。
＜監視装置の構成＞
次に、図２を参照して、監視装置１０の構成の一例について説明する。
次に、図２を参照して、監視装置１０の構成の一例について説明する。
図２に示すように、監視装置１０は、映像受信部１０１、映像変形部１０２、監視エリア図格納部１０３、操作受付部１０４、及び、ＵＩ制御部１０５を備える。
映像受信部１０１は、図３に示すように、ネットワークＮを通じて、各監視カメラ２又はレコーダ３からオリジナル映像を受信する。
映像変形部１０２は、オリジナル映像を変形させ、変形映像を生成する。例えば、映像変形部１０２は、図３に示すように、オリジナル映像の一例である魚眼映像２０１を変形させて、変形映像の一例であるＰＴＺ映像２０２を生成する。ＰＴＺ映像２０２は、図４に示すように、魚眼映像２０１の一部領域３０１を、パン、チルト及び／又はズームした映像である。つまり、ＰＴＺ映像２０２は、俯瞰視点とは異なる視点からの映像である別視点映像の一例である。
また、映像変形部１０２は、図３に示すように、オリジナル画像の一例である魚眼映像２０１を変形させて、変形映像の一例である方形映像２０３を生成する。方形映像２０３は、図５に示すように、魚眼映像２０１を方形の映像に変形した映像である。別言すると、方形映像２０３は、魚眼映像２０１の歪みを補正した映像であるともいえる。
監視エリア図格納部１０３は、監視エリア図を格納する。監視エリアが屋外の場合、監視エリア図は、各監視カメラ２が設置されている場所の地図であってよい。監視エリアが建物内の場合、監視エリア図は、各監視カメラ２が設置されているフロアの見取り図であってよい。つまり、監視エリア図は、監視エリアの俯瞰図であるともいえる。監視エリア図格納部１０３は、ネットワークＮを通じて所定のサーバから監視エリア図を取得し、格納してよい。
操作受付部１０４は、操作装置４から操作内容を受信し、その操作内容をＵＩ制御部１０５へ送信する。
ＵＩ制御部１０５は、オリジナル映像及び／又は変形映像を含む監視用ＵＩを生成し、ディスプレイに表示する。ＵＩ制御部１０５は、監視用ＵＩに監視エリア図を含めてもよい。
例えば、ＵＩ制御部１０５は、図６に示すように、監視エリアにおける複数の監視カメラ２にそれぞれ対応する複数の映像ウィンドウ４００を、監視エリア図１２０（見取り図）に重畳して配置し、監視用ＵＩ１１０を生成する。ＵＩ制御部１０５は、映像変形部１０２が変形した方形映像２０３を、当該方形映像２０３を撮影した監視カメラ２に対応する映像ウィンドウ４００に表示する。典型的に監視エリア図１２０は直交座標系の俯瞰図であるので、監視エリア図１２０に重畳して配置した映像ウィンドウ４００に、同じく直交座標系の俯瞰視点の映像である方形映像２０３を表示することにより、監視者は、監視用ＵＩ１１０から、監視エリアの状況を容易に把握できる。なお、監視者は、操作者又はユーザといった他の用語に読み替えられてもよい。
また、監視エリア図１２０に重畳した複数の映像ウィンドウ４００に方形映像２０３を表示することにより、図７に示すように、人などのターゲット３２１の移動経路３２２が複数の方形映像２０３に跨がる場合に、隣接する方形映像２０３間で移動経路３２２が連続するので、監視者は、ターゲット３２１の移動経路３２２を容易に把握できる。仮に複数の監視カメラ２が撮影した複数の魚眼映像２０１をそのまま（つまり方形映像２０３に変形せずに）並べて表示した場合、隣接する魚眼映像２０１間で移動経路３２２はほとんど連続しないので、監視者は、ターゲット３２１の移動経路３２２を把握することが難しい。したがって、ＵＩ制御部１０５は、映像ウィンドウ４００に表示するデフォルトの映像を、方形映像２０３としてもよい。つまり、監視者による特段の指示が無い場合、映像ウィンドウ４００には、方形映像２０３が表示されてもよい。
また、ＵＩ制御部１０５は、監視用ＵＩ１１０において、映像形式設定及び映像パラメータ設定の操作を受け付ける。映像形式設定及び映像パラメータ設定の説明については後述する。
＜映像形式設定＞
次に、図８から図１０を参照して、映像形式設定について説明する。
次に、図８から図１０を参照して、映像形式設定について説明する。
ＵＩ制御部１０５は、監視用ＵＩ１１０に含まれる各映像ウィンドウ４００に対する、映像形式の切替操作を受け付ける。例えば、監視者が、監視用ＵＩ１１０において、或る１つの映像ウィンドウ４００を選択して映像形式の切替操作を行うと、ＵＩ制御部１０５は、図８に示すように、「魚眼表示」、「ＰＴＺ表示」及び「方形表示」の選択肢を含む映像形式切替用ＵＩ３３０を表示する。
例えば、図８に示すように、監視者が映像形式切替用ＵＩ３３０から「魚眼表示」を選択した場合、ＵＩ制御部１０５は、選択された映像ウィンドウ４００内の方形映像２０３を、図９に示すように、魚眼映像２０１に切り替える。例えば、監視者が映像形式切替用ＵＩ３３０から「ＰＴＺ表示」を選択した場合、ＵＩ制御部１０５は、選択された映像ウィンドウ４００内の方形映像２０３を、図１０に示すように、ＰＴＺ映像２０２に切り替える。
このように、監視者は、監視用ＵＩ１１０に配置されている各映像ウィンドウ４００の映像を、異なる形式の映像に、簡単な操作で切り替えることができる。例えば、監視者は、フロアの通路に合わせて配置した映像ウィンドウ４００には方形映像２０１を表示させ、フロアの出入口付近に配置した映像ウィンドウ４００にはＰＴＺ映像２０２を表示させることができる。これにより、監視者は、出入口付近に配置したＰＴＺ映像２０２から人の顔を監視し、フロアの通路に配置した複数の方形映像４０１から人の移動経路を監視することができる。
なお、ＵＩ制御部１０５は、選択された映像ウィンドウ４００の映像を異なる形式の映像に切り替える代わりに、選択された映像ウィンドウ４００とは別の映像ウィンドウに、異なる形式の映像を表示してもよい。例えば、図１１に示すように、選択された映像ウィンドウ４００には方形映像２０３を表示したまま、別の映像ウィンドウ４０１にＰＴＺ映像２０２を表示してもよい。この場合、ＵＩ制御部１０５は、図１１に示すように、選択された映像ウィンドウ４００と、別の映像ウィンドウ４０１との関連性を示す線３４０を、監視用ＵＩ１１０に表示してもよい。
また、ＵＩ制御部１０５は、図１２に示すように、別の映像ウィンドウ４０１に表示したＰＴＺ映像２０２に対して、旋回表示、及び／又は、拡大／縮小表示の操作を受け付けてもよい。また、ＵＩ制御部１０５は、この旋回表示、及び／又は、拡大／縮小表示を、ＰＴＺ映像２０２の映像ウィンドウ４０１とは別の映像ウィンドウ４０２に表示してもよい。
＜映像パラメータ設定＞
次に、図１３から図１８を参照して、映像パラメータ設定について説明する。
次に、図１３から図１８を参照して、映像パラメータ設定について説明する。
ＵＩ制御部１０５は、監視用ＵＩ１１０に含まれる各映像ウィンドウ４００について、映像パラメータの設定を受け付ける。例えば、監視者が、１つの映像ウィンドウ４００を選択し、映像パラメータの設定操作を行うと、図１３に示すように、映像パラメータを設定するためのＵＩ（以下「映像パラメータ設定用ＵＩ」という）５００を表示する。
映像パラメータ設定用ＵＩ５００は、図１３に示すように、映像パラメータの一例である、ウィンドウサイズ、ウィンドウ位置、映像位置、映像回転角、及び、映像視角を入力するためのＵＩ（以下「入力ＵＩ」という）を提供する。
ウィンドウサイズの入力ＵＩ５１０は、映像ウィンドウ４００の幅及び高さの入力を受け付ける。図１３に示すように、ウィンドウサイズの入力ＵＩ５１０は、幅及び高さの数値入力用のＵＩ５１１、５１２を有してよい。
ウィンドウ位置の入力ＵＩ５２０は、映像ウィンドウ４００の位置（Ｘ座標及びＹ座標）の入力を受け付ける。図１３に示すように、ウィンドウ位置の入力ＵＩ５２０は、Ｘ座標及びＹ座標の数値入力用のＵＩ５２１、５２２と、方向入力用のＵＩ５２４とを有してよい。方向入力用のＵＩ５２４は、入力された方向に応じて、映像ウィンドウ４００のＸ座標及び／又はＹ座標を、所定の大きさの単位で（例えば１０ずつ）増加又は減少させる。例えば、監視者は、まず、方向入力用のＵＩ５２４を操作して、映像ウィンドウ４００の位置（Ｘ座標及びＹ座標）を大まかに設定し、次に、数値入力用のＵＩ５２１、５２２を操作して、映像ウインドウ４００の位置（Ｘ座標及びＹ座標）を細かく調整する。これにより、監視者は、図１４に示すように、映像ウィンドウ４００を、監視用ＵＩ１１０における（或いは監視エリア図１２０における）所望の位置に、素早く且つ正確に移動させることができる。
さらに、ウィンドウ位置の入力ＵＩ５２０は、映像ウィンドウ４００の表示の優先度（Ｚ座標）の入力を受け付ける。映像ウィンドウ４００同士が重なる場合、優先度（Ｚ座標）の大きい方の映像ウィンドウ４００が前面に表示される。監視者は、Ｚ座標の数値入力用のＵＩ５２３を操作することにより、図１５に示すように、映像ウィンドウ４００ａ、４００ｂ同士が重なる場合に、所望の映像ウィンドウ４００ａを前面に表示させることができる。
映像位置の入力ＵＩ５３０は、映像ウィンドウ４００内に表示される映像２００（図１６参照）の位置（Ｘ座標及びＹ座標）の入力を受け付ける。映像２００は、上述した魚眼映像２０１、ＰＴＺ映像２０２及び方形映像２０３の何れであってもよい。図１３に示すように、映像位置の入力ＵＩ５３０は、Ｘ座標及びＹ座標の数値入力用のＵＩ５３１、５３２と、方向入力用のＵＩ５３３とを有してよい。方向入力用のＵＩ５３３は、入力された方向に応じて、映像ウィンドウ４００内に表示される映像２００のＸ座標及びＹ座標を、所定の大きさの単位で（例えば５ずつ）増加又は減少させる。また、映像位置の入力ＵＩ５３０は、映像ウィンドウ４００内の映像２００の位置をデフォルト位置に設定するための初期化用のＵＩ５３４を有してよい。例えば、監視者は、まず、方向入力用のＵＩ５３３を操作して、映像ウィンドウ４００内の映像２００の位置（Ｘ座標及びＹ座標）を大まかに設定し、次に、数値入力用のＵＩ５３１、５３２を操作して、映像ウィンドウ４００内の映像２００の位置（Ｘ座標及びＹ座標）を細かく調整する。これにより、監視者は、図１６に示すように、映像ウィンドウ４００内に表示される映像２００の位置を、素早く且つ正確に調整することができる。
映像回転角の入力ＵＩ５４０は、映像ウィンドウ４００内に表示される映像２００（図１７参照）の回転角の入力を受け付ける。図１３に示すように、映像回転角の入力ＵＩ５４０は、回転角の数値入力用のＵＩ５４１と、右回転用のＵＩ５４２と、左回転用のＵＩ５４３とを有してよい。右回転用のＵＩ５４２は、映像ウィンドウ４００内の映像２００を右に９０度回転させる。左回転用のＵＩ５４３は、映像ウィンドウ４００内の映像２００を左に９０度回転させる。例えば、監視者は、まず、右回転用のＵＩ５４２又は左回転用のＵＩ５４３を操作して、映像ウィンドウ４００内の映像２００の回転角を大まかに設定し、次に、数値入力用のＵＩ５４１を操作して、映像ウィンドウ４００内の映像２００の回転角を細かく調整する。これにより、監視者は、図１７に示すように、映像ウィンドウ４００内に表示される映像２００の回転角を、素早く且つ正確に調整することができる。
映像視角の入力ＵＩ５５０は、映像ウィンドウ４００内に表示される映像２００（図１８参照）の視角（viewing angle）の入力を受け付ける。図１３に示すように、映像視角の入力ＵＩ５５０は、視角の数値入力用のＵＩ５５１と、視角拡大用のＵＩ５５２と、視角縮小用のＵＩ５５３とを有してよい。視角拡大用のＵＩ５５２は、映像ウィンドウ４００内の映像２００の視角を、所定の大きさの単位で（例えば５ずつ）増加（つまりズームイン）させる。視角縮小用のＵＩ５５３は、映像ウィンドウ４００内の映像２００の視角を、所定の大きさの単位で縮小（つまりズームアウト）させる。例えば、監視者は、まず、視角拡大用のＵＩ５５２又は視角縮小用のＵＩ５５３を操作して、映像ウィンドウ４００内の映像２００の視角を大まかに設定し、次に、視角の数値入力用のＵＩ５５１を操作して、映像ウィンドウ４００内の映像２００の視角を細かく調整する。これにより、監視者は、図１８に示すように、映像ウィンドウ４００内に表示される映像２００の視角を、素早く且つ正確に調整することができる。
＜フローチャート＞
次に、図１９に示すフローチャートを参照して、監視装置１０の動作の一例を説明する。
次に、図１９に示すフローチャートを参照して、監視装置１０の動作の一例を説明する。
ＵＩ制御部１０５は、各監視カメラ２（又はレコーダ３）に対して、映像配信開始の指示を送信する（Ｓ１０１）。
各監視カメラ２（又はレコーダ３）から映像が配信されていない場合（Ｓ１０２：ＮＯ）、Ｓ１０６の処理が実行され、映像が配信されている場合（Ｓ１０２：ＹＥＳ）、Ｓ１０３の処理が実行される。
映像受信部１０１は、各監視カメラ２（又はレコーダ３）から魚眼映像２０１を受信する（Ｓ１０３）。
映像変形部１０２は、映像形式「方形映像」が設定されている映像ウィンドウ４００向けに、魚眼映像２０１を方形映像２０３に変形する。また、映像変形部１０２は、映像形式「ＰＴＺ映像」が設定されている映像ウィンドウ４００向けに、魚眼映像２０１をＰＴＺ映像２０２に変形する（Ｓ１０４）。
ＵＩ制御部１０５は、各映像ウィンドウ４００を映像パラメータ設定に従って監視エリア図１２０に配置し、監視用ＵＩ１１０を生成する。そして、ＵＩ制御部１０５は、監視用ＵＩ１１０をディスプレイに表示する（Ｓ１０５）。
監視者から監視終了が指示されない場合（Ｓ１０６：ＮＯ）、Ｓ１０２からＳ１０５が実行され、監視終了が指示された場合（Ｓ１０６：ＹＥＳ）、本処理は終了する。
＜監視システムの動作例＞
次に、図２０に示すシーケンスチャートを参照して、監視システム１の動作の一例を説明する。
次に、図２０に示すシーケンスチャートを参照して、監視システム１の動作の一例を説明する。
監視装置１０は、操作者から監視開始の操作が行われると（Ｓ２０１）、各監視カメラ２（又はレコーダ３）に対して、映像配信開始の指示を送信する（Ｓ２０２）。
各監視カメラ２（又はレコーダ３）は、映像配信開始の指示を受信すると、監視装置１０に対して、魚眼映像２０１を配信する（Ｓ２０３）。
監視装置１０は、各監視カメラ２（又はレコーダ３）から魚眼映像２０１を受信し、映像形式設定に応じて、魚眼映像２０１を方形映像２０３又はＰＴＺ映像２０２に変形する（Ｓ２０４）。
監視装置１０は、監視用ＵＩ１１０を生成し、ディスプレイに表示する（Ｓ２０５）。
監視システム１は、Ｓ２０３からＳ２０５の処理を繰り返す。これにより、監視用ＵＩ１１０に含まれる映像ウィンドウ４００内の映像が更新される。
監視装置１０は、操作者から監視終了の操作が行われると（Ｓ２１０）、各監視カメラ２（又はレコーダ３）に対して、映像配信終了の指示を送信する（Ｓ２１１）。各監視カメラ２（又はレコーダ３）は、Ｓ２１１の指示を受信すると、監視装置１０に対する魚眼映像２０１の配信を停止する。
監視装置１０は、ディスプレイにおける監視用ＵＩ１１０の表示を終了する（Ｓ２１２）。
＜変形例＞
次に、本実施の形態に係る監視システム１に関する幾つかの変形例を説明する。
次に、本実施の形態に係る監視システム１に関する幾つかの変形例を説明する。
監視用ＵＩ１１０において、映像ウィンドウ４００は、監視エリア図１２０に重畳される場合に限られない。例えば、図２１に示すように、監視用ＵＩ１１０において、映像ウィンドウ４００は、監視エリア図１２０と並べて表示されてよい。
監視用ＵＩ１１０は、映像ウィンドウ４００内の映像の一部分を拡大表示するためのＵＩ、及び、拡大表示したまま上下左右へスクロール表示するためのＵＩを提供してもよい。例えば、図２２に示すように、監視者は、操作装置４を操作して、監視用ＵＩ１１０における映像ウィンドウ４００内の一部領域を、拡大表示できてよい。また、図２２に示すように、監視用ＵＩ１１０において、監視者が、映像ウィンドウ４００内の一部領域６０１を指定した場合、ＵＩ制御部１０５は、その指定された一部領域６０１内の映像を、別の映像ウィンドウ４０３に拡大表示してもよい。また、監視者は、操作装置４を操作して、上述の拡大表示を、上下左右へ移動（つまりスクロール表示）できてよい。
監視用ＵＩ１１０において、映像ウィンドウ４００は、監視エリア図１２０の任意の位置に任意のサイズで配置できてよい。例えば、監視者は、図２３に示すように、監視用ＵＩ１１０において、映像ウィンドウ４００内の映像が地図６０２の道路と適合するように、各映像ウィンドウ４００の位置及びサイズを調整して、地図上に配置してもよい。これにより、監視者は、監視用ＵＩ１１０から、自動車６０３の移動経路６０４を容易に把握できる。
＜本開示のまとめ＞
本開示に係る監視装置１０は、複数の監視カメラ２が撮影した俯瞰視点の魚眼映像２０１を受信する映像受信部１０１と、魚眼映像２０１を、俯瞰視点の方形映像２０３又は別視点映像（例えばＰＴＺ映像２０２）に変形する映像変形部１０２と、複数の監視カメラ２にそれぞれ対応する複数の映像ウィンドウ４００を配置し、映像ウィンドウ４００に方形映像２０３を表示し、映像ウィンドウ４００毎に表示映像を別視点映像に切り替えるための映像形式切替用ＵＩ３３０を提供するＵＩ制御部１０５と、を備える。
本開示に係る監視装置１０は、複数の監視カメラ２が撮影した俯瞰視点の魚眼映像２０１を受信する映像受信部１０１と、魚眼映像２０１を、俯瞰視点の方形映像２０３又は別視点映像（例えばＰＴＺ映像２０２）に変形する映像変形部１０２と、複数の監視カメラ２にそれぞれ対応する複数の映像ウィンドウ４００を配置し、映像ウィンドウ４００に方形映像２０３を表示し、映像ウィンドウ４００毎に表示映像を別視点映像に切り替えるための映像形式切替用ＵＩ３３０を提供するＵＩ制御部１０５と、を備える。
この構成によれば、監視者は、俯瞰視点の複数の方形映像２０３から、監視エリアの状況を容易に把握でき、かつ、映像形式切替用ＵＩ３３０を通じて、任意の映像ウィンドウ４００の表示映像を別視点映像に容易に切り替えることができる。
以上、本発明に係る実施形態について図面を参照して詳述してきたが、上述したレコーダ３及び監視装置１０などの各装置の機能は、コンピュータプログラムにより実現され得る。
図２４は、各装置の機能をプログラムにより実現するコンピュータのハードウェア構成を示す図である。このコンピュータ２１００は、キーボード又はマウス、タッチパッドなどの入力装置２１０１、ディスプレイ又はスピーカーなどの出力装置２１０２、ＣＰＵ（Central Processing Unit）２１０３、ＲＯＭ（Read Only Memory）２１０４、ＲＡＭ（Random Access Memory）２１０５、ハードディスク装置又はＳＳＤ（Solid State Drive）などの記憶装置２１０６、ＤＶＤ−ＲＯＭ（Digital Versatile Disk Read Only Memory）又はＵＳＢ（Universal Serial Bus）メモリなどの記録媒体から情報を読み取る読取装置２１０７、ネットワークを介して通信を行う送受信装置２１０８を備え、各部はバス２１０９により接続される。
そして、読取装置２１０７は、上記各装置の機能を実現するためのプログラムを記録した記録媒体からそのプログラムを読み取り、記憶装置２１０６に記憶させる。あるいは、送受信装置２１０８が、ネットワークに接続されたサーバ装置と通信を行い、サーバ装置からダウンロードした上記各装置の機能を実現するためのプログラムを記憶装置２１０６に記憶させる。
そして、ＣＰＵ２１０３が、記憶装置２１０６に記憶されたプログラムをＲＡＭ２１０５にコピーし、そのプログラムに含まれる命令をＲＡＭ２１０５から順次読み出して実行することにより、上記各装置の機能が実現される。
本開示はソフトウェア、ハードウェア、又は、ハードウェアと連携したソフトウェアで実現することが可能である。
上記実施の形態の説明に用いた各機能ブロックは、部分的に又は全体的に、集積回路であるＬＳＩとして実現され、上記実施の形態で説明した各プロセスは、部分的に又は全体的に、一つのＬＳＩ又はＬＳＩの組み合わせによって制御されてもよい。ＬＳＩは個々のチップから構成されてもよいし、機能ブロックの一部または全てを含むように一つのチップから構成されてもよい。ＬＳＩはデータの入力と出力を備えてもよい。ＬＳＩは、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
集積回路化の手法はＬＳＩに限るものではなく、専用回路、汎用プロセッサ又は専用プロセッサで実現してもよい。また、ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。本開示は、デジタル処理又はアナログ処理として実現されてもよい。
さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてありえる。
本開示の一態様は、監視システムに有用である。
１ 監視システム
２ 監視カメラ
３ レコーダ
４ 操作装置
１０ 監視装置
１０１ 映像受信部
１０２ 映像変形部
１０３ 監視エリア図格納部
１０４ 操作受付部
１０５ ＵＩ制御部
１１０ 監視用ＵＩ
１２０ 監視エリア図
２０１ 魚眼映像
２０２ ＰＴＺ映像
２０３ 方形映像
２ 監視カメラ
３ レコーダ
４ 操作装置
１０ 監視装置
１０１ 映像受信部
１０２ 映像変形部
１０３ 監視エリア図格納部
１０４ 操作受付部
１０５ ＵＩ制御部
１１０ 監視用ＵＩ
１２０ 監視エリア図
２０１ 魚眼映像
２０２ ＰＴＺ映像
２０３ 方形映像
Claims (6)
- 複数の監視カメラが撮影した俯瞰視点の魚眼映像を受信する受信部と、
前記魚眼映像を、前記俯瞰視点の方形の映像である方形映像、又は、前記俯瞰視点とは異なる視点の映像である別視点映像に変形する映像変形部と、
前記複数の監視カメラにそれぞれ対応する複数の映像ウィンドウを配置し、前記映像ウィンドウに前記方形映像を表示し、前記映像ウィンドウ毎に表示映像を前記別視点映像に切り替えるためのＵＩ（User Interface）を提供する制御部と、
を備える、監視装置。 - 前記複数の監視カメラの監視エリアにおける俯瞰図である監視エリア図を格納する監視エリア図格納部、を備え、
前記制御部は、前記監視エリア図を表示すると共に、前記映像ウィンドウを前記監視エリア図に重畳して配置する、
請求項１に記載の監視装置。 - 前記別視点映像は、前記魚眼映像の一部を、パン、チルト及び／又はズームして変形させた映像である、
請求項２に記載の監視装置。 - 前記制御部は、前記複数の映像ウィンドウの各々について、当該映像ウィンドウの位置及びサイズ、並びに、当該映像ウィンドウの表示映像の位置、回転角及び視角のうちの少なくとも１つを設定するためＵＩを提供する、
請求項１から３の何れか１項に記載の監視装置。 - 監視装置は、
複数の監視カメラが撮影した俯瞰視点の魚眼映像を受信し、
前記魚眼映像を、前記俯瞰視点の方形の映像である方形映像、又は、前記俯瞰視点とは異なる視点の映像である別視点映像に変形し、
前記複数の監視カメラにそれぞれ対応する複数の映像ウィンドウを配置し、前記映像ウィンドウに前記方形映像を表示し、前記映像ウィンドウ毎に表示映像を前記別視点映像に切り替えるためのＵＩ（User Interface）を提供する、
監視方法。 - 複数の監視カメラが撮影した俯瞰視点の魚眼映像を受信し、
前記魚眼映像を、前記俯瞰視点の方形の映像である方形映像、又は、前記俯瞰視点とは異なる視点の映像である別視点映像に変形し、
前記複数の監視カメラにそれぞれ対応する複数の映像ウィンドウを配置し、前記映像ウィンドウに前記方形映像を表示し、前記映像ウィンドウ毎に表示映像を前記別視点映像に切り替えるためのＵＩ（User Interface）を提供する、
ことをコンピュータに実行させる、
コンピュータプログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019014367A JP6802864B2 (ja) | 2019-01-30 | 2019-01-30 | 監視装置、監視方法、及び、コンピュータプログラム |
| US16/773,271 US11178362B2 (en) | 2019-01-30 | 2020-01-27 | Monitoring device, monitoring method and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019014367A JP6802864B2 (ja) | 2019-01-30 | 2019-01-30 | 監視装置、監視方法、及び、コンピュータプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020123818A JP2020123818A (ja) | 2020-08-13 |
| JP6802864B2 true JP6802864B2 (ja) | 2020-12-23 |
Family
ID=71733023
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019014367A Active JP6802864B2 (ja) | 2019-01-30 | 2019-01-30 | 監視装置、監視方法、及び、コンピュータプログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US11178362B2 (ja) |
| JP (1) | JP6802864B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102553886B1 (ko) * | 2015-12-24 | 2023-07-11 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 이미지 제어 방법 |
| US10950104B2 (en) | 2019-01-16 | 2021-03-16 | PANASONIC l-PRO SENSING SOLUTIONS CO., LTD. | Monitoring camera and detection method |
| CN112565730B (zh) * | 2020-12-03 | 2023-07-25 | 阿波罗智联(北京)科技有限公司 | 路侧感知方法、装置、电子设备、存储介质及路侧设备 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4424031B2 (ja) * | 2004-03-30 | 2010-03-03 | 株式会社日立製作所 | 画像生成装置、システムまたは画像合成方法。 |
| JP4827694B2 (ja) | 2006-11-06 | 2011-11-30 | パナソニック株式会社 | 監視システム |
| TWI441514B (zh) * | 2008-11-12 | 2014-06-11 | Avisonic Technology Corp | 魚眼影像校正及減輕透視變形的影像處理方法及相關影像處理裝置 |
| JP5678324B2 (ja) * | 2011-02-10 | 2015-03-04 | パナソニックＩｐマネジメント株式会社 | 表示装置、コンピュータプログラム、及び表示方法 |
| US8548274B2 (en) * | 2011-04-29 | 2013-10-01 | Aptina Imaging Corporation | Systems and methods for efficient storage of image transformations |
| JP6065195B2 (ja) * | 2012-05-08 | 2017-01-25 | パナソニックＩｐマネジメント株式会社 | 表示映像形成装置及び表示映像形成方法 |
| US9886636B2 (en) * | 2013-05-23 | 2018-02-06 | GM Global Technology Operations LLC | Enhanced top-down view generation in a front curb viewing system |
| US20150358539A1 (en) * | 2014-06-06 | 2015-12-10 | Jacob Catt | Mobile Virtual Reality Camera, Method, And System |
| TWI578781B (zh) * | 2014-10-21 | 2017-04-11 | 群暉科技股份有限公司 | 藉助於全景地圖來管理一監視系統之方法與裝置 |
| US20160119551A1 (en) * | 2014-10-22 | 2016-04-28 | Sentry360 | Optimized 360 Degree De-Warping with Virtual Cameras |
| JP5999395B1 (ja) * | 2015-03-19 | 2016-09-28 | パナソニックＩｐマネジメント株式会社 | 撮像装置、録画装置および映像出力制御装置 |
| JP6558579B2 (ja) * | 2015-12-24 | 2019-08-14 | パナソニックＩｐマネジメント株式会社 | 動線分析システム及び動線分析方法 |
| TWI613106B (zh) * | 2016-05-05 | 2018-02-01 | 威盛電子股份有限公司 | 車輛周圍影像處理方法及裝置 |
| KR102508663B1 (ko) * | 2016-06-02 | 2023-03-13 | 삼성전자주식회사 | 구형 컨텐츠 편집 방법 및 이를 지원하는 전자 장치 |
| KR102505951B1 (ko) * | 2016-08-24 | 2023-03-03 | 한화테크윈 주식회사 | 이미지 제공 장치, 방법 및 컴퓨터 프로그램 |
| JP6750998B2 (ja) * | 2016-10-07 | 2020-09-02 | パナソニックｉ−ＰＲＯセンシングソリューションズ株式会社 | 監視システム及び監視方法 |
| US20180210442A1 (en) * | 2017-01-23 | 2018-07-26 | Qualcomm Incorporated | Systems and methods for controlling a vehicle using a mobile device |
| EP3480779A1 (en) * | 2017-11-01 | 2019-05-08 | Volvo Car Corporation | Method and system for handling images |
-
2019
- 2019-01-30 JP JP2019014367A patent/JP6802864B2/ja active Active
-
2020
- 2020-01-27 US US16/773,271 patent/US11178362B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020123818A (ja) | 2020-08-13 |
| US11178362B2 (en) | 2021-11-16 |
| US20200244926A1 (en) | 2020-07-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11064161B2 (en) | Systems and methods for video monitoring using linked devices | |
| JP6802864B2 (ja) | 監視装置、監視方法、及び、コンピュータプログラム | |
| CN106803884B (zh) | 图像处理装置 | |
| JP6167703B2 (ja) | 表示制御装置、プログラム及び記録媒体 | |
| EP2442548B1 (en) | Control device, camera system, and program | |
| JP6071866B2 (ja) | 表示制御装置、表示装置、撮像システム、表示制御方法、及びプログラム | |
| JP6312046B2 (ja) | 画像処理システム、画像処理方法、及びプログラム | |
| JP5743016B2 (ja) | 画像を生成する装置および方法 | |
| US9961268B2 (en) | Control device, imaging system, control method, and program for controlling imaging unit according to image capturing direction and zoom magnification | |
| US9906710B2 (en) | Camera pan-tilt-zoom (PTZ) control apparatus | |
| US7761173B2 (en) | Predictive display for a system having delayed feedback of a command issued | |
| EP2028841A2 (en) | Camera control method, camera control device, camera control program, and camera system | |
| EP2913996B1 (en) | Information-processing device, information-processing method, program, and information-processing system | |
| JP6543108B2 (ja) | 情報処理装置およびその制御方法、並びにプログラム | |
| WO2017024954A1 (zh) | 图像显示方法及装置 | |
| JP2016096482A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| JP7379956B2 (ja) | 画像処理装置およびプログラム | |
| JP3034891B2 (ja) | 画像表示装置 | |
| CN104584019A (zh) | 信息处理装置、信息处理方法 | |
| JP6443505B2 (ja) | プログラム、表示制御装置及び表示制御方法 | |
| JP2004177614A (ja) | マルチ画面表示装置 | |
| JP6246435B1 (ja) | 設置位置決定装置、設置位置決定方法及び設置位置決定プログラム | |
| JP2007124354A (ja) | サーバ及びその制御方法並びに映像配信システム | |
| JP6630096B2 (ja) | 表示制御装置及びその制御方法、コンピュータプログラム | |
| JP2013143709A (ja) | 画像表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190625 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20190731 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190902 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190910 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191107 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20191205 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201106 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201110 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201127 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6802864 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |