JP7081972B2 - Parking monitoring system, parking monitoring method and recording medium - Google Patents

Parking monitoring system, parking monitoring method and recording medium Download PDF

Info

Publication number
JP7081972B2
JP7081972B2 JP2018085573A JP2018085573A JP7081972B2 JP 7081972 B2 JP7081972 B2 JP 7081972B2 JP 2018085573 A JP2018085573 A JP 2018085573A JP 2018085573 A JP2018085573 A JP 2018085573A JP 7081972 B2 JP7081972 B2 JP 7081972B2
Authority
JP
Japan
Prior art keywords
parking
vehicle
information
parking space
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018085573A
Other languages
Japanese (ja)
Other versions
JP2019192025A (en
Inventor
崇 神尾
一真 大谷
Original Assignee
i-PRO株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by i-PRO株式会社 filed Critical i-PRO株式会社
Priority to JP2018085573A priority Critical patent/JP7081972B2/en
Publication of JP2019192025A publication Critical patent/JP2019192025A/en
Application granted granted Critical
Publication of JP7081972B2 publication Critical patent/JP7081972B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Devices For Checking Fares Or Tickets At Control Points (AREA)

Description

本開示は、車両の駐車を監視する駐車監視システム、駐車監視方法および記録媒体に関する。 The present disclosure relates to a parking monitoring system, a parking monitoring method and a recording medium for monitoring the parking of a vehicle.

特許文献1には、駐車区域を監視する画像取込装置からのビデオデータを受信し、そのビデオデータのフレーム内の車両の位置をフレームが取り込まれた時刻に関連付けた車両の時空間情報を判定する、ビデオベースの検知装置が開示されている。この検知装置は、時空間情報を用いて車両が停止している継続時間を判定し、判定された継続時間が閾値を超えた場合に、短時間の駐車違反の警告を示す通知を発行することで、短時間の駐車違反を取り締まる。 Patent Document 1 receives video data from an image capture device that monitors a parking area, and determines vehicle spatiotemporal information in which the position of the vehicle within the frame of the video data is associated with the time when the frame is captured. A video-based detector is disclosed. This detection device uses spatio-temporal information to determine the duration of time the vehicle has stopped, and when the determined duration exceeds the threshold, issues a notification to warn of a short-term parking violation. So, crack down on short-term parking violations.

特開2013-218679号公報Japanese Unexamined Patent Publication No. 2013-218679

特許文献1では、検知装置により、車両が駐車区画に駐車したことが検知されたり、その駐車の継続時間が計時されたりすることは行われる。画像取込装置は駐車区域を監視するが、その一方で、車両が駐車区画に駐車する前の時点でどの駐車区画が空き状態であるかを検知することは考慮されていない。言い換えると、特許文献1の構成では、車両は実際に駐車区画に到着し、その時に空き状態の駐車区画があれば駐車可能であるが、駐車区画に到着する前の時点で空き状態の駐車区画が存在するか否かがドライバーは認識できない。このため、駐車区画に実際に到着した際に駐車できない可能性があり、ドライバー等のユーザの利便性の向上を図ることが困難であった。 In Patent Document 1, the detection device detects that the vehicle is parked in the parking lot, and the duration of the parking is timed. The image capture device monitors the parking area, while not considering which parking area is vacant before the vehicle parks in the parking area. In other words, in the configuration of Patent Document 1, the vehicle actually arrives at the parking lot, and if there is an empty parking lot at that time, it is possible to park, but the parking lot is empty before arriving at the parking lot. The driver cannot recognize whether or not there is. Therefore, it may not be possible to park the car when it actually arrives at the parking lot, and it is difficult to improve the convenience of the user such as a driver.

本開示は、上述した従来の事情に鑑みて案出され、駐車スペースに駐車する前の時点で空き状態の駐車スペースの有無を検知してドライバー等のユーザ端末に通知し、ユーザの車両の駐車を適切に支援し、ユーザの利便性を向上する駐車監視システム、駐車監視方法および記録媒体を提供することを目的とする。 The present disclosure has been devised in view of the above-mentioned conventional circumstances, detects the presence or absence of an empty parking space before parking in the parking space, notifies the user terminal such as a driver, and parks the user's vehicle. It is an object of the present invention to provide a parking monitoring system, a parking monitoring method, and a recording medium that appropriately support and improve the convenience of the user.

本開示は、駐車場を撮像可能に設置されたカメラと映像処理装置とが通信可能に接続された駐車監視システムであって、前記カメラは、前記駐車場の撮像映像を前記映像処理装置に繰り返し送信し、前記映像処理装置は、前記カメラから送られた前記撮像映像に基づいて、前記駐車場における車両の空き駐車スペースの有無を検知し、前記空き駐車スペースを検知した場合に、前記空き駐車スペースの検知通知を少なくとも1台のユーザ端末に送信し、前記カメラから送られた前記撮像映像に基づいて、前記空き駐車スペースに駐車した駐車車両に関する情報を解析し、解析された前記駐車車両に関する情報と、前記空き駐車スペースに車両を駐車させたユーザが所持するユーザ端末から送られた車両情報とのマッチングに応じて、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定し、駐車開始の旨を前記ユーザのユーザ端末に送信する、駐車監視システムを提供する。 The present disclosure is a parking monitoring system in which a camera installed so as to be able to image a parking lot and an image processing device are connected so as to be communicable, and the camera repeats the captured image of the parking lot to the image processing device. The image processing device detects the presence or absence of an empty parking space for a vehicle in the parking lot based on the captured image sent from the camera, and when the image processing device detects the empty parking space, the empty parking space is transmitted. A space detection notification is transmitted to at least one user terminal, and information on a parked vehicle parked in the vacant parking space is analyzed based on the captured image sent from the camera, and the analyzed parking vehicle is related. According to the matching between the information and the vehicle information sent from the user terminal possessed by the user who parked the vehicle in the vacant parking space, the parking of the user's vehicle in the vacant parking space is determined and parking is started. Provided is a parking monitoring system that transmits a message to the user terminal of the user .

また、本開示は、駐車場を撮像可能に設置されたカメラと映像処理装置とが通信可能に接続された駐車監視システムにおける駐車監視方法であって、前記カメラは、前記駐車場の撮像映像を前記映像処理装置に繰り返し送信し、前記映像処理装置は、前記カメラから送られた前記撮像映像に基づいて、前記駐車場における車両の空き駐車スペースの有無を検知し、前記空き駐車スペースを検知した場合に、前記空き駐車スペースの検知通知を少なくとも1台のユーザ端末に送信し、前記カメラから送られた前記撮像映像に基づいて、前記空き駐車スペースに駐車した駐車車両に関する情報を解析し、解析された前記駐車車両に関する情報と、前記空き駐車スペースに車両を駐車させたユーザが所持するユーザ端末から送られた車両情報とのマッチングに応じて、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定し、駐車開始の旨を前記ユーザのユーザ端末に送信する、駐車監視方法を提供する。 Further, the present disclosure is a parking monitoring method in a parking monitoring system in which a camera installed so as to be able to image a parking lot and an image processing device are connected so as to be communicable, and the camera captures an image captured by the parking lot. It is repeatedly transmitted to the video processing device, and the video processing device detects the presence or absence of an empty parking space for a vehicle in the parking lot based on the captured image sent from the camera, and detects the empty parking space. In this case, the detection notification of the vacant parking space is transmitted to at least one user terminal, and the information about the parked vehicle parked in the vacant parking space is analyzed and analyzed based on the captured image sent from the camera. According to the matching between the information about the parked vehicle and the vehicle information sent from the user terminal possessed by the user who parked the vehicle in the vacant parking space, the parking of the user's vehicle in the vacant parking space is performed. Provided is a parking monitoring method for determining and transmitting to the user terminal of the user that parking has started .

また、本開示は、駐車場を撮像可能に設置されたカメラと通信可能に接続された、コンピュータである映像処理装置に、前記カメラから繰り返し送られた前記駐車場の撮像映像に基づいて、前記駐車場における車両の空き駐車スペースの有無を検知する手順と、前記空き駐車スペースが検知された場合に、前記空き駐車スペースの検知通知を少なくとも1台のユーザ端末に送信する手順と、前記カメラから送られた前記撮像映像に基づいて、前記空き駐車スペースに駐車した駐車車両に関する情報を解析する手順と、解析された前記駐車車両に関する情報と、前記空き駐車スペースに車両を駐車させたユーザが所持するユーザ端末から送られた車両情報とのマッチングに応じて、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定し、駐車開始の旨を前記ユーザのユーザ端末に送信する手順と、を実現させるためのプログラムを記録した、コンピュータ読み取り可能な記録媒体を提供する。 Further, the present disclosure is based on the captured image of the parking lot repeatedly sent from the camera to a video processing device which is a computer connected to a camera installed so as to be able to image the parking lot. A procedure for detecting the presence or absence of an empty parking space for a vehicle in a parking lot, a procedure for transmitting a detection notification of the empty parking space to at least one user terminal when the empty parking space is detected, and a procedure from the camera . A procedure for analyzing information about a parked vehicle parked in the vacant parking space based on the transmitted captured image, information about the analyzed parked vehicle, and possession by a user who parks the vehicle in the vacant parking space. According to the matching with the vehicle information sent from the user terminal, the procedure of determining the parking of the user's vehicle in the vacant parking space and transmitting the parking start to the user terminal of the user is realized. Provides a computer-readable recording medium on which a program for recording is recorded.

本開示によれば、駐車スペースに駐車する前の時点で空き状態の駐車スペースの有無を検知してドライバー等のユーザ端末に通知でき、ユーザが乗車する車両の駐車を適切に支援できてユーザの利便性を向上できる。 According to the present disclosure, it is possible to detect the presence or absence of an empty parking space before parking in the parking space and notify the user terminal such as a driver, and it is possible to appropriately support the parking of the vehicle on which the user is riding. Convenience can be improved.

実施の形態1に係る駐車監視システムのシステム構成例を示す図The figure which shows the system configuration example of the parking monitoring system which concerns on Embodiment 1. 監視カメラの撮像映像を構成する1フレームの撮像画像の一例を示す図The figure which shows an example of the captured image of one frame which constitutes the captured image of a surveillance camera. 監視カメラの内部構成例を示すブロック図Block diagram showing an example of the internal configuration of a surveillance camera 画像処理PCの内部構成例を示すブロック図Block diagram showing an example of the internal configuration of an image processing PC クラウドサーバの内部構成例を示すブロック図Block diagram showing an example of the internal configuration of a cloud server スマートフォンの内部構成例を示すブロック図Block diagram showing an example of the internal configuration of a smartphone 実施の形態1に係る駐車監視システムの動作シナリオを時系列に示す説明図Explanatory diagram showing the operation scenario of the parking monitoring system according to the first embodiment in chronological order. 図7のシナリオU1,U2の動作手順の一例を示すフローチャートA flowchart showing an example of the operation procedure of the scenarios U1 and U2 of FIG. スマートフォンにおける空き駐車スペース情報の表示例を示す図Diagram showing an example of displaying vacant parking space information on a smartphone 図7のシナリオU3,U4,U5,U6の動作手順の一例を示すフローチャートA flowchart showing an example of the operation procedure of the scenarios U3, U4, U5, and U6 of FIG. 図7のシナリオU7,U8の動作手順の一例を示すフローチャートA flowchart showing an example of the operation procedure of the scenarios U7 and U8 of FIG. スマートフォンにおける駐車開始の旨の通知画面の表示例を示す図A diagram showing a display example of a notification screen to the effect that parking has started on a smartphone. スマートフォンにおける駐車終了の旨および課金情報の通知画面の表示例を示す図A diagram showing a display example of a notification screen for parking termination and billing information on a smartphone. 実施の形態1に係る駐車監視システムの動作手順の一例を示すシーケンス図A sequence diagram showing an example of the operation procedure of the parking monitoring system according to the first embodiment. 実施の形態2に係る駐車監視システムの動作シナリオを時系列に示す説明図Explanatory diagram showing the operation scenario of the parking monitoring system according to the second embodiment in chronological order. 図15のシナリオV2,V3,V4の動作手順の一例を示すフローチャートA flowchart showing an example of the operation procedure of the scenarios V2, V3, and V4 of FIG. スマートフォンにおける駐車違反車両画面の表示例を示す図Diagram showing a display example of a parking violation vehicle screen on a smartphone スマートフォンにおける駐車違反車両画面の表示例を示す図Diagram showing a display example of a parking violation vehicle screen on a smartphone 実施の形態2に係る駐車監視システムの動作手順の一例を示すシーケンス図A sequence diagram showing an example of the operation procedure of the parking monitoring system according to the second embodiment.

(実施の形態1の内容に至る経緯)
上述した特許文献1では、検知装置により、車両が駐車区画に駐車したことが検知されたり、その駐車の継続時間が計時されたりすることは行われる。画像取込装置は駐車区域を監視するが、その一方で、車両が駐車区画に駐車する前の時点でどの駐車区画が空き状態であるかを検知することは考慮されていない。言い換えると、特許文献1の構成では、車両は実際に駐車区画に到着し、その時に空き状態の駐車区画があれば駐車可能であるが、駐車区画に到着する前の時点で空き状態の駐車区画が存在するか否かがドライバーは認識できない。このため、駐車区画に実際に到着した際に駐車できない可能性があり、ドライバー等のユーザの利便性の向上を図ることが困難であった。
(Background to the contents of the first embodiment)
In the above-mentioned Patent Document 1, the detection device detects that the vehicle is parked in the parking lot and measures the duration of the parking. The image capture device monitors the parking area, but on the other hand, it does not consider detecting which parking area is empty before the vehicle parks in the parking area. In other words, in the configuration of Patent Document 1, the vehicle actually arrives at the parking lot, and if there is an empty parking lot at that time, it is possible to park, but the parking lot is empty before arriving at the parking lot. The driver cannot recognize whether or not there is. Therefore, it may not be possible to park the car when it actually arrives at the parking lot, and it is difficult to improve the convenience of the user such as a driver.

そこで、以下の実施の形態1では、駐車スペースに駐車する前の時点で空き状態の駐車スペースの有無を検知してドライバー等のユーザ端末に通知し、ユーザの車両の駐車を適切に支援し、ユーザの利便性を向上する駐車場監視システム、駐車場監視方法および記録媒体の例を説明する。 Therefore, in the following embodiment 1, the presence or absence of an empty parking space is detected before parking in the parking space, and the user terminal such as a driver is notified to appropriately support the parking of the user's vehicle. An example of a parking lot monitoring system, a parking lot monitoring method, and a recording medium that improve user convenience will be described.

以下、添付図面を適宜参照しながら、本開示に係る駐車監視システム、駐車監視方法および記録媒体を具体的に開示した各実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。 Hereinafter, each embodiment in which the parking monitoring system, the parking monitoring method, and the recording medium according to the present disclosure are specifically disclosed will be described in detail with reference to the accompanying drawings as appropriate. However, more detailed explanation than necessary may be omitted. For example, detailed explanations of already well-known matters and duplicate explanations for substantially the same configuration may be omitted. This is to avoid unnecessary redundancy of the following description and to facilitate the understanding of those skilled in the art. It should be noted that the accompanying drawings and the following description are provided for those skilled in the art to fully understand the present disclosure, and are not intended to limit the subject matter described in the claims.

(実施の形態1)
実施の形態1では、駐車監視システムは、ドライバー(以下、「ユーザ」という)が自車両を駐車場(例えば、店舗、民間企業もしくは公共施設等が所有する駐車場、道路の縦列駐車スペース。以下同様。)が有する複数の駐車スペースのうちいずれかに駐車する場合、駐車場を撮像可能に設置されたカメラから繰り返して送られる撮像映像に基づいて、駐車スペースの空きが存在するか否かを検知する。駐車監視システムは、空き状態の駐車スペース(以下、「空き駐車スペース」という)を検知した場合、空き駐車スペースの検知通知をユーザが所持するユーザ端末に送信する。
(Embodiment 1)
In the first embodiment, the parking monitoring system is a parking lot (for example, a parking lot owned by a store, a private company, a public facility, etc., or a parallel parking space on a road) in which a driver (hereinafter referred to as “user”) parks his / her own vehicle. Similarly, when parking in one of the multiple parking spaces owned by), whether or not there is a vacant parking space is determined based on the images repeatedly sent from the camera installed so that the parking lot can be imaged. Detect. When the parking monitoring system detects a vacant parking space (hereinafter referred to as "vacant parking space"), the parking monitoring system sends a detection notification of the vacant parking space to a user terminal owned by the user.

図1は、実施の形態1に係る駐車監視システム100のシステム構成例を示す図である。図2は、監視カメラCAの撮像映像を構成する1フレームの撮像画像IMG1の一例を示す図である。駐車監視システム100は、駐車場(上述参照)を撮像可能に設置された監視カメラCAと、駐車監視システム100の監視センター(図示略)内に設置された画像処理PC20と、クラウドサーバ30と、スマートフォン50と、管理者PC70と、外部機関PC80とを含む構成である。 FIG. 1 is a diagram showing a system configuration example of the parking monitoring system 100 according to the first embodiment. FIG. 2 is a diagram showing an example of a one-frame captured image IMG1 constituting the captured image of the surveillance camera CA. The parking monitoring system 100 includes a surveillance camera CA installed so as to be able to image a parking lot (see above), an image processing PC 20 installed in a monitoring center (not shown) of the parking monitoring system 100, a cloud server 30, and a cloud server 30. The configuration includes a smartphone 50, an administrator PC 70, and an external organization PC 80.

なお図1では、監視カメラCAは1台のみが明示的に図示されているが、複数台の監視カメラCAが駐車監視システム100に含まれてもよい。 Although only one surveillance camera CA is explicitly shown in FIG. 1, a plurality of surveillance camera CAs may be included in the parking monitoring system 100.

カメラの一例としての監視カメラCAは、駐車場(上述参照)を撮像可能な画角が設定されたカメラであり、例えば360度の方向を撮像可能な全方位カメラである。なお、監視カメラCAは、全方位カメラに限定されず、画角が固定の固定カメラ、画角が可変のPTZ(Pan Tilt Zoom)カメラでもよい。図2に示すように、監視カメラCAは、例えば複数の車両が道路ROD1の両方の路肩にそれぞれ縦列駐車される駐車スペースPSP1,PSP2を画角内に含むように、一方の路肩に設置されたポールPL1に取り付けられる。監視カメラCAは、ポールPL1の取り付け位置から下方に向けて画角内の様子を撮像する。監視カメラCAは、GPS(Global Positioning System)受信機を搭載して自機の位置情報を常時把握可能であり、撮像により得られた撮像画像IGM1のデータを撮像時刻TM1および自機の位置の情報と対応付けて、ネットワーク網NW1を介して画像処理PC20に繰り返して(例えば5分周期毎)に送信する。ネットワーク網NW1は、例えば有線LAN(Local Area Network)もしくは無線LAN(Local Area Network)により構成される。以下、GPS受信機により得られた位置情報を、便宜的に「GPS情報」という。 A surveillance camera CA as an example of a camera is a camera having an angle of view set so as to be able to image a parking lot (see above), and is, for example, an omnidirectional camera capable of capturing a direction of 360 degrees. The surveillance camera CA is not limited to the omnidirectional camera, and may be a fixed camera having a fixed angle of view or a PTZ (Pan Tilt Zoom) camera having a variable angle of view. As shown in FIG. 2, the surveillance camera CA is installed on one of the road shoulders so as to include, for example, parking spaces PSP1 and PSP2 in which a plurality of vehicles are parallel parked on both shoulders of the road ROD1. It is attached to the pole PL1. The surveillance camera CA captures the state in the angle of view downward from the mounting position of the pole PL1. The surveillance camera CA is equipped with a GPS (Global Positioning System) receiver and can constantly grasp the position information of its own machine. In association with the above, the image is repeatedly transmitted to the image processing PC 20 via the network network NW1 (for example, every 5 minutes). The network network NW1 is composed of, for example, a wired LAN (Local Area Network) or a wireless LAN (Local Area Network). Hereinafter, the position information obtained by the GPS receiver is referred to as "GPS information" for convenience.

映像処理装置の一例としての画像処理PC20は、駐車監視システム100の監視員(例えば監視員等のシステム運営者)が存在する監視センター(図示略)に配置されるコンピュータであり、ネットワーク網NW1を介して監視カメラCAから繰り返して送られる撮像映像のデータを受信して保持する。画像処理PC20は、監視員の操作に応じて、撮像映像のデータを解析する。画像処理PC20は、撮像映像を構成する1フレームの撮像画像毎に所定の解析処理を実行する。画像処理PC20は、撮像画像IMG1内に車両の形状を含む特徴点を所定数検出できた場合に車両の存在を検知可能であり、例えば、駐車場内に車両が進入したか否かを検知できる。また、画像処理PC20は、駐車場内で車両と車両との間の間隔が一定値以上離れているか否かを検知することで、車両が駐車可能な空き駐車スペースが存在するか否かを検知できる。図2に示す撮像画像IMG1は、画像処理PC20に接続されたディスプレイDP1に表示される。画像処理PC20は、駐車場内に進入した車両を検知すると、その車両を囲む枠WK1を対応する車両に対応付けて重畳表示する。画像処理PC20は、各種の解析結果をクラウドサーバ30に通知(送信)する。 The image processing PC 20 as an example of the image processing device is a computer arranged in a monitoring center (not shown) in which a monitor of the parking monitoring system 100 (for example, a system operator such as a monitor) is present, and is a computer network NW1. The data of the captured image repeatedly transmitted from the surveillance camera CA via the surveillance camera CA is received and held. The image processing PC 20 analyzes the data of the captured image according to the operation of the observer. The image processing PC 20 executes a predetermined analysis process for each captured image of one frame constituting the captured image. The image processing PC 20 can detect the presence of the vehicle when a predetermined number of feature points including the shape of the vehicle can be detected in the captured image IMG 1, and can detect, for example, whether or not the vehicle has entered the parking lot. Further, the image processing PC 20 can detect whether or not there is an empty parking space in which the vehicle can be parked by detecting whether or not the distance between the vehicles is separated by a certain value or more in the parking lot. .. The captured image IMG1 shown in FIG. 2 is displayed on the display DP1 connected to the image processing PC 20. When the image processing PC 20 detects a vehicle that has entered the parking lot, the image processing PC 20 displays the frame WK1 surrounding the vehicle in an superimposed manner in association with the corresponding vehicle. The image processing PC 20 notifies (transmits) various analysis results to the cloud server 30.

映像処理装置の一例としてのクラウドサーバ30は、ネットワーク網NW1を介して監視カメラCAおよび画像処理PC20との間でそれぞれ通信可能に接続され、さらに、ネットワーク網NW2を介してスマートフォン50、管理者PC70および外部機関PC80との間でそれぞれ通信可能に接続される。ネットワーク網NW2は、例えば携帯電話網、有線LAN(Local Area Network)もしくは無線LAN(Local Area Network)を含む。具体的には、クラウドサーバ30は、スマートフォン50との間では携帯電話網を介して接続され、管理者PC70および外部機関PC80との間では有線LAN(Local Area Network)もしくは無線LAN(Local Area Network)を介して接続されてよい。クラウドサーバ30は、画像処理PC20から送られた各種の解析結果を受信してストレージの一例としてのHDD37に蓄積(保存)する。HDD37に蓄積される各種の情報は、例えばユーザ情報、駐車車両情報および課金情報を含む。 The cloud server 30 as an example of the video processing device is connected to the surveillance camera CA and the image processing PC 20 via the network network NW1 so as to be communicable with each other, and further, the smartphone 50 and the administrator PC 70 via the network network NW2. And is connected to the external organization PC80 so as to be able to communicate with each other. The network network NW2 includes, for example, a mobile phone network, a wired LAN (Local Area Network) or a wireless LAN (Local Area Network). Specifically, the cloud server 30 is connected to the smartphone 50 via a mobile phone network, and is connected to the administrator PC 70 and the external organization PC 80 via a wired LAN (Local Area Network) or a wireless LAN (Local Area Network). ) May be connected. The cloud server 30 receives various analysis results sent from the image processing PC 20 and stores (saves) them in the HDD 37 as an example of storage. Various types of information stored in the HDD 37 include, for example, user information, parked vehicle information, and billing information.

ユーザ情報37aは、実施の形態1に係る駐車監視システム100のユーザとして予め登録された人物(ドライバー)を識別可能な情報であり、例えば、ユーザID(Identification)、パスワード、ユーザの氏名、年齢、住所、性別、運転免許証番号、クレジットカード番号等を含む。なお、ユーザIDは運転免許証番号と一致してもよい。ユーザIDおよびパスワードは、例えば、実施の形態1に係る駐車監視システム100のユーザとして登録してスマートフォン50において利用可能な専用アプリケーションにログインする際に使用される。クレジットカード番号は、例えばクラウドサーバ30により課金計算される駐車代金の支払い(請求)の際に使用される。 The user information 37a is information that can identify a person (driver) registered in advance as a user of the parking monitoring system 100 according to the first embodiment, and is, for example, a user ID (Identification), a password, a user's name, an age, and the like. Includes address, gender, driver's license number, credit card number, etc. The user ID may match the driver's license number. The user ID and password are used, for example, when registering as a user of the parking monitoring system 100 according to the first embodiment and logging in to a dedicated application available on the smartphone 50. The credit card number is used, for example, when paying (billing) the parking fee calculated by the cloud server 30.

駐車車両情報37bは、クラウドサーバ30によって駐車場内の駐車スペースに駐車した車両(つまり、ユーザの車両)の特徴および駐車期間(つまり、駐車開始時刻から駐車終了時刻までの期間)を示す情報である。特徴は、例えば車両のナンバープレート、車型、車色等を含む。 The parked vehicle information 37b is information indicating the characteristics of the vehicle (that is, the user's vehicle) parked in the parking space in the parking lot by the cloud server 30 and the parking period (that is, the period from the parking start time to the parking end time). .. Features include, for example, vehicle license plates, vehicle types, vehicle colors, and the like.

課金情報37cは、駐車場内の駐車スペースに駐車していた車両の駐車期間(上述参照)の長さに応じてクラウドサーバ30により課金計算された駐車代金(つまり、請求額)を示す情報である。なお、クラウドサーバ30は、課金計算の際に、単に駐車時間の長さで駐車代金を計算する以外に、駐車場(上述参照)の場所(例えばGPS情報)、駐車日時(例えば夜間は安く設定等)、駐車時間の長さ、過去の経験値(例えば、利用率、混雑率)等に応じた料金テーブル(図示略)をHDD37に保持し、その料金テーブルを用いて駐車代金を計算してもよい。例えば、クラウドサーバ30は、料金テーブルを参照し、駐車日時の駐車時間に対応する駐車料金を算出してよい。 The billing information 37c is information indicating the parking price (that is, the billed amount) calculated by the cloud server 30 according to the length of the parking period (see above) of the vehicle parked in the parking space in the parking lot. .. In addition to simply calculating the parking price based on the length of the parking time, the cloud server 30 sets the location of the parking lot (see above) (for example, GPS information) and the parking date and time (for example, cheap at night) when calculating the charge. Etc.), the length of parking time, past experience values (for example, utilization rate, congestion rate), etc.), a charge table (not shown) is held in the HDD 37, and the parking price is calculated using the charge table. May be good. For example, the cloud server 30 may refer to the charge table and calculate the parking charge corresponding to the parking time on the parking date and time.

ユーザ端末の一例としてのスマートフォン50は、実施の形態1に係る駐車監視システム100のユーザが所持する携帯型の無線通信端末であり、駐車監視システム100のユーザとして登録された後に利用可能な専用アプリケーションがインストールされている。スマートフォン50は、GPS(Global Positioning System)受信機を搭載して自機の位置情報を常時把握可能であり、上述した専用アプリケーションの起動中、クラウドサーバ30に自機の位置情報を定期的に送信する。スマートフォン50は、専用アプリケーションの起動中、駐車場内に空き駐車スペースが検知された場合には、空き駐車スペースの検知通知を受信して、所定の画面(図9参照)を表示する。これにより、ユーザは、駐車場から離れた場所に位置している場合でも、空き駐車スペースの検知通知をスマートフォン50で確認することで、その空き駐車スペースが検知された駐車場に向けて運転して移動開始して駐車を行うことができ、利便性が向上する。 The smartphone 50 as an example of the user terminal is a portable wireless communication terminal possessed by the user of the parking monitoring system 100 according to the first embodiment, and is a dedicated application that can be used after being registered as a user of the parking monitoring system 100. Is installed. The smartphone 50 is equipped with a GPS (Global Positioning System) receiver and can constantly grasp the position information of the own machine, and periodically transmits the position information of the own machine to the cloud server 30 while the above-mentioned dedicated application is running. do. When a vacant parking space is detected in the parking lot while the dedicated application is running, the smartphone 50 receives the vacant parking space detection notification and displays a predetermined screen (see FIG. 9). As a result, even if the user is located in a place away from the parking lot, the user can drive toward the parking lot where the vacant parking space is detected by checking the detection notification of the vacant parking space on the smartphone 50. It is possible to start moving and park, improving convenience.

外部端末の一例としての管理者PC70は、駐車監視システム100の駐車場管理者が使用するコンピュータであり、ネットワーク網NW2を介してクラウドサーバ30との間で通信可能に接続される。管理者PC70は、ディスプレイDP2と接続され、駐車期間の長さに応じた駐車料金の設定画面(図示略)および駐車料金による収入情報をディスプレイDP2に表示する。 The administrator PC 70 as an example of the external terminal is a computer used by the parking lot administrator of the parking monitoring system 100, and is communicably connected to the cloud server 30 via the network network NW2. The administrator PC 70 is connected to the display DP2, and displays a parking fee setting screen (not shown) according to the length of the parking period and income information based on the parking fee on the display DP2.

外部端末の一例としての外部機関PC80は、外部機関の担当者が使用するコンピュータであり、ネットワーク網NW2を介してクラウドサーバ30との間で通信可能に接続される。外部機関は、例えばシステム管理者、警察署または自治体である。管理者PC70は、ディスプレイDP3と接続され、クラウドサーバ30により検知された違反駐車もしくは駐車違反(違法駐車の一例)の検知通知(実施の形態2参照)をディスプレイDP3に表示する。 The external institution PC80 as an example of the external terminal is a computer used by the person in charge of the external institution, and is communicably connected to the cloud server 30 via the network network NW2. External agencies are, for example, system administrators, police stations or municipalities. The administrator PC 70 is connected to the display DP3 and displays a detection notification (see the second embodiment) of the illegal parking or the parking violation (an example of illegal parking) detected by the cloud server 30 on the display DP3.

次に、駐車監視システム100を構成する監視カメラCA、画像処理PC20、クラウドサーバ30およびスマートフォン50のそれぞれの内部構成例について、図3、図4、図5および図6を参照してそれぞれ説明する。図3は、監視カメラの内部構成例を示すブロック図である。図4は、画像処理PCの内部構成例を示すブロック図である。図5は、クラウドサーバの内部構成例を示すブロック図である。図6は、スマートフォンの内部構成例を示すブロック図である。 Next, examples of internal configurations of the surveillance camera CA, the image processing PC 20, the cloud server 30, and the smartphone 50 constituting the parking monitoring system 100 will be described with reference to FIGS. 3, 4, 5, and 6, respectively. .. FIG. 3 is a block diagram showing an example of the internal configuration of a surveillance camera. FIG. 4 is a block diagram showing an example of the internal configuration of the image processing PC. FIG. 5 is a block diagram showing an example of an internal configuration of a cloud server. FIG. 6 is a block diagram showing an example of the internal configuration of a smartphone.

図3に示すように、監視カメラCAは、CPU41と、通信部42と、電源管理部44と、イメージセンサ45と、メモリ46と、ネットワークコネクタ47とを含む構成である。なお、図3では、イメージセンサ45の前段(つまり、CPU41のイメージセンサ45を挟んだ反対側)に、360度の全方位の撮像が可能に光を入射するための魚眼レンズの図示が省略されている。 As shown in FIG. 3, the surveillance camera CA includes a CPU 41, a communication unit 42, a power supply management unit 44, an image sensor 45, a memory 46, and a network connector 47. In addition, in FIG. 3, the figure of the fisheye lens for injecting light into the front stage of the image sensor 45 (that is, the opposite side of the image sensor 45 of the CPU 41 so as to enable omnidirectional imaging of 360 degrees) is omitted. There is.

CPU41は、監視カメラCAの各部の動作制御を全体的に統括するための信号処理、他の各部との間のデータの入出力処理、データの演算処理およびデータの記憶処理を行う。CPU41の代わりに、MPU(Micro Processing Unit)またはDSP(Digital Signal Processor)等のプロセッサが設けられてもよい。CPU41は、例えば画像処理PC20を操作する監視員の操作により、全方位の撮像映像のデータのうち特定範囲(方向)の映像を切り出した切出し撮像映像のデータを生成してメモリ46に保存する。 The CPU 41 performs signal processing for overall control of operation control of each part of the surveillance camera CA, data input / output processing with each other part, data calculation processing, and data storage processing. Instead of the CPU 41, a processor such as an MPU (Micro Processing Unit) or a DSP (Digital Signal Processor) may be provided. The CPU 41 generates, for example, the data of the cut-out image taken by cutting out the image of a specific range (direction) from the data of the image taken in all directions by the operation of the observer who operates the image processing PC 20, and stores it in the memory 46.

イメージセンサ45は、例えばCMOS(相補性金属酸化膜半導体)センサ、又はCCD(電荷結合素子)センサを用いて構成され、不図示の魚眼レンズにより集光された駐車場からの光の光学像を受光面において撮像処理することで全方位の撮像映像のデータを取得する。 The image sensor 45 is configured by using, for example, a CMOS (Complementary Metal Oxide Semiconductor) sensor or a CCD (Charge Coupled Device) sensor, and receives an optical image of light from a parking lot focused by a fisheye lens (not shown). The data of the captured image in all directions is acquired by performing the imaging process on the surface.

メモリ46は、監視カメラCAの動作を規定するプログラム、設定値のデータが格納されたROM46zと、全方位の撮像映像のデータまたはその一部の範囲が切り出された切出し撮像映像のデータ、ワークデータを記憶するRAM46yと、監視カメラCAに挿抜自在に接続され、各種データが記憶されるメモリカード46xとを有する。 The memory 46 includes a program that defines the operation of the surveillance camera CA, ROM 46z in which data of set values are stored, data of omnidirectional captured video, data of cut-out captured video obtained by cutting out a part of the range, and work data. It has a RAM 46y for storing data and a memory card 46x which is freely connected to the monitoring camera CA and stores various data.

通信部42は、ネットワークコネクタ47を介して接続されるネットワーク網NW1との間のデータ通信を制御するネットワークインタフェース(I/F)である。 The communication unit 42 is a network interface (I / F) that controls data communication with the network network NW1 connected via the network connector 47.

電源管理部44は、監視カメラCAの各部に直流電源を供給する。また、電源管理部44は、ネットワークコネクタ47を介してネットワークNWに接続される機器に直流電源を供給してもよい。 The power management unit 44 supplies DC power to each unit of the surveillance camera CA. Further, the power management unit 44 may supply DC power to a device connected to the network NW via the network connector 47.

ネットワークコネクタ47は、全方位の撮像映像または全方位を2次元化したパノラマの撮像映像のデータを、ネットワーク網NW1を介して画像処理PC20に伝送するとともに、また、ネットワークケーブル(図示略)を介して給電可能なコネクタである。 The network connector 47 transmits omnidirectional captured video or panoramic captured video data in which all directions are two-dimensional to the image processing PC 20 via the network network NW1, and also via a network cable (not shown). It is a connector that can supply power.

図4に示すように、画像処理PC20は、プロセッサ11と、ROM(Read Only Memory)12と、RAM(Random Access Memory)13と、キーボード14と、マウス15と、入出力I/F(インターフェース)16と、HDD(Hard Disk Drive)17と、通信部19とを含む構成である。ROM12、RAM13、キーボード14、マウス15、入出力I/F16、HDD17および通信部19は、それぞれプロセッサ11との間でデータもしくは情報の入出力が可能に内部バス等で接続される。 As shown in FIG. 4, the image processing PC 20 includes a processor 11, a ROM (Read Only Memory) 12, a RAM (Random Access Memory) 13, a keyboard 14, a mouse 15, and an input / output I / F (interface). The configuration includes 16, an HDD (Hard Disk Drive) 17, and a communication unit 19. The ROM 12, RAM 13, keyboard 14, mouse 15, input / output I / F 16, HDD 17, and communication unit 19 are each connected to the processor 11 by an internal bus or the like so that data or information can be input / output.

プロセッサ11は、例えばCPU(Central Processing Unit)、MPU(Micro Processing Unit)、DSP(Digital Signal Processor)またはFPGA(Field Programmable Gate Array)を用いて構成される。プロセッサ11は、画像処理PC20の制御部として機能し、画像処理PC20の各部の動作を全体的に統括するための制御処理、画像処理PC20の各部との間のデータもしくは情報の入出力処理、データの演算処理、およびデータもしくは情報の記憶処理を行う。プロセッサ11は、ROM12に記憶されたプログラムおよびデータに従って動作する。プロセッサ11は、処理の実行時にROM12およびRAM13を使用し、監視カメラCAから送られた撮像映像のデータをディスプレイ18に表示したり、その撮像映像のデータを用いた解析処理により得られた各種の解析結果のデータをディスプレイ18に表示したりする。 The processor 11 is configured by using, for example, a CPU (Central Processing Unit), an MPU (Micro Processing Unit), a DSP (Digital Signal Processor), or an FPGA (Field Programmable Gate Array). The processor 11 functions as a control unit of the image processing PC 20, and controls processing for overall control of the operation of each unit of the image processing PC 20, data or information input / output processing with and from each unit of the image processing PC 20, and data. Performs arithmetic processing and data or information storage processing. The processor 11 operates according to the program and data stored in the ROM 12. The processor 11 uses the ROM 12 and the RAM 13 at the time of executing the process, displays the data of the captured image sent from the surveillance camera CA on the display 18, and various types obtained by the analysis process using the captured image data. The analysis result data is displayed on the display 18.

ROM12は、読み出し専用のメモリであり、OS(Operating System)のプログラムおよびデータ、ならびに画像処理PC20が実行可能な各種の解析処理を実行させるためのプログラムおよびデータを予め格納する。このOSのプログラムは、画像処理PC20の起動に伴って実行される。各種の解析処理を実行させるためのプログラムおよびデータは、本開示に係る記録媒体(例えばCD-ROM、DVD-ROM等)に予め記録されたおり、画像処理PC20において実行可能にインストールされてもよい。 The ROM 12 is a read-only memory, and stores OS (Operating System) programs and data in advance, as well as programs and data for executing various analysis processes that can be executed by the image processing PC 20. The program of this OS is executed when the image processing PC 20 is started. The programs and data for executing various analysis processes are recorded in advance on the recording medium (for example, CD-ROM, DVD-ROM, etc.) according to the present disclosure, and may be executably installed on the image processing PC 20. ..

RAM13は、書き込みおよび読み出しが可能なメモリであり、プロセッサ11による各種の解析処理時にワークメモリとして用いられ、各種の解析処理の際に用いるまたは生成されるデータもしくは情報を一時的に保持する。 The RAM 13 is a memory that can be written and read, and is used as a work memory during various analysis processes by the processor 11, and temporarily holds data or information used or generated during various analysis processes.

キーボード14およびマウス15は、ユーザとの間のヒューマンインターフェースとしての機能を有し、ユーザの操作を入力する。言い換えると、キーボード14およびマウス15は、画像処理PC20により実行される各種の処理における各種の設定に用いられる。 The keyboard 14 and the mouse 15 have a function as a human interface with the user, and input the user's operation. In other words, the keyboard 14 and the mouse 15 are used for various settings in various processes executed by the image processing PC 20.

入出力I/F16は、画像処理PC20に接続される外部機器(例えば、ディスプレイDP1)との間のデータもしくは情報の入出力を行うためのインターフェースとして動作する。入出力I/F16は、プロセッサ11から出力された各種のデータ(例えば、監視カメラCAから送られた撮像映像のデータ、その撮像映像のデータを用いた解析処理により得られた各種の解析結果のデータ)をディスプレイDP1に出力する。なお図2では、画像処理PC20は外部機器としてディスプレイDP1にのみ接続されているが、外部機器はディスプレイDP1に限定されない。上述したように、外部機器は、入出力I/F16を介してプロセッサ11との間でデータもしくは情報の入出力を行う。 The input / output I / F 16 operates as an interface for inputting / outputting data or information to / from an external device (for example, display DP1) connected to the image processing PC 20. The input / output I / F 16 is the data of various data output from the processor 11 (for example, the data of the captured image sent from the monitoring camera CA, and the various analysis results obtained by the analysis process using the captured image data. Data) is output to the display DP1. In FIG. 2, the image processing PC 20 is connected only to the display DP1 as an external device, but the external device is not limited to the display DP1. As described above, the external device inputs / outputs data or information to / from the processor 11 via the input / output I / F 16.

HDD17は、画像処理PC20のストレージとしての役割を有し、プロセッサ11から出力された各種のデータ(例えば、監視カメラCAから送られた撮像映像のデータ、その撮像映像のデータを用いた解析処理により得られた各種の解析結果のデータ)を蓄積(保存)する。撮像映像のデータは、撮像映像のデータと、その撮像映像が監視カメラCAにより撮像された時刻情報と、その監視カメラCAが設置された位置情報とを含む。各種の解析結果のデータは、例えば、駐車場内に空き駐車スペースを検知した旨、駐車場内の空き駐車スペースに車両が駐車したことの検知の旨、駐車場内の駐車スペースから車両が退出したことの検知の旨の各種の情報を含む。 The HDD 17 has a role as a storage of the image processing PC 20, and is subjected to analysis processing using various data output from the processor 11 (for example, the captured image data sent from the surveillance camera CA and the captured image data). Accumulate (save) the obtained data of various analysis results. The captured image data includes the captured image data, the time information in which the captured image is captured by the surveillance camera CA, and the position information in which the surveillance camera CA is installed. The data of various analysis results are, for example, that an empty parking space was detected in the parking lot, that a vehicle was parked in the empty parking space in the parking lot, and that the vehicle left the parking space in the parking lot. Includes various information to the effect of detection.

通信部19は、画像処理PC20とネットワーク網NW1を介して通信可能に接続された監視カメラCAもしくはクラウドサーバ30との間で、データもしくは情報の通信(つまり、送受信)を行う。通信部19は、監視カメラCAから送られた撮像映像のデータを受信してプロセッサ11に出力したり、プロセッサ11から送られた各種の解析結果のデータをクラウドサーバ30に送信したりする。 The communication unit 19 communicates (that is, sends and receives) data or information between the image processing PC 20 and the surveillance camera CA or the cloud server 30 that is communicably connected via the network network NW1. The communication unit 19 receives the data of the captured image sent from the surveillance camera CA and outputs it to the processor 11, and transmits the data of various analysis results sent from the processor 11 to the cloud server 30.

表示部の一例としてのディスプレイDP1は、例えばLCD(Liquid Crystal Display)または有機EL(Electroluminescence)等の表示デバイスを用いて構成される。ディスプレイDP1は、ユーザとの間のヒューマンインターフェースとしての機能を有し、各種の設定の内容や画像処理PC20の動作状態、各種の解析結果、および監視カメラCAから送られた撮像映像のデータを表示する。 The display DP1 as an example of the display unit is configured by using a display device such as an LCD (Liquid Crystal Display) or an organic EL (Electroluminescence). The display DP1 has a function as a human interface with the user, and displays the contents of various settings, the operating state of the image processing PC 20, various analysis results, and the data of the captured image sent from the surveillance camera CA. do.

図5に示すように、クラウドサーバ30は、プロセッサ31と、ROM(Read Only Memory)32と、RAM(Random Access Memory)33と、HDD(Hard Disk Drive)37と、通信部39とを含む構成である。ROM32、RAM33、HDD37および通信部39は、それぞれプロセッサ31との間でデータもしくは情報の入出力が可能に内部バス等で接続される。 As shown in FIG. 5, the cloud server 30 includes a processor 31, a ROM (Read Only Memory) 32, a RAM (Random Access Memory) 33, an HDD (Hard Disk Drive) 37, and a communication unit 39. Is. The ROM 32, the RAM 33, the HDD 37, and the communication unit 39 are each connected to the processor 31 by an internal bus or the like so that data or information can be input / output.

プロセッサ31は、例えばCPU(Central Processing Unit)、MPU(Micro Processing Unit)、DSP(Digital Signal Processor)またはFPGA(Field Programmable Gate Array)を用いて構成される。プロセッサ31は、クラウドサーバ30の制御部として機能し、クラウドサーバ30の各部の動作を全体的に統括するための制御処理、クラウドサーバ30の各部との間のデータもしくは情報の入出力処理、データの演算処理、およびデータもしくは情報の記憶処理を行う。プロセッサ31は、ROM32に記憶されたプログラムおよびデータに従って動作する。プロセッサ31は、処理の実行時にROM32およびRAM33を使用し、画像処理PC20から送られた各種の解析結果のデータを用いた各種の判断処理もしくは抽出処理の結果として得られたデータもしくは情報をHDD37に蓄積(保存)する。 The processor 31 is configured by using, for example, a CPU (Central Processing Unit), an MPU (Micro Processing Unit), a DSP (Digital Signal Processor), or an FPGA (Field Programmable Gate Array). The processor 31 functions as a control unit of the cloud server 30, and controls processing for overall control of the operation of each unit of the cloud server 30, data or information input / output processing with and from each unit of the cloud server 30, and data. Performs arithmetic processing and data or information storage processing. The processor 31 operates according to the program and data stored in the ROM 32. The processor 31 uses the ROM 32 and the RAM 33 at the time of executing the process, and transfers the data or information obtained as a result of various judgment processes or extraction processes using the data of various analysis results sent from the image processing PC 20 to the HDD 37. Accumulate (save).

ROM32は、読み出し専用のメモリであり、OS(Operating System)のプログラムおよびデータ、ならびにクラウドサーバ30が実行可能な各種の判断処理を実行させるためのプログラムおよびデータを予め格納する。このOSのプログラムは、クラウドサーバ30の起動に伴って実行される。各種の解析処理を実行させるためのプログラムおよびデータは、本開示に係る記録媒体(例えばCD-ROM、DVD-ROM等)に予め記録されたおり、クラウドサーバ30において実行可能にインストールされてもよい。 The ROM 32 is a read-only memory, and stores OS (Operating System) programs and data in advance, and programs and data for executing various determination processes that can be executed by the cloud server 30. This OS program is executed when the cloud server 30 is started. The programs and data for executing various analysis processes are recorded in advance on the recording medium (for example, CD-ROM, DVD-ROM, etc.) according to the present disclosure, and may be executably installed on the cloud server 30. ..

RAM33は、書き込みおよび読み出しが可能なメモリであり、プロセッサ31による各種の判断処理もしくは抽出処理の時にワークメモリとして用いられ、各種の判断処理もしくは抽出処理の際に用いるまたは生成されるデータもしくは情報を一時的に保持する。 The RAM 33 is a memory that can be written and read, and is used as a work memory during various judgment processes or extraction processes by the processor 31, and data or information used or generated in various judgment processes or extraction processes. Temporarily hold.

HDD37は、クラウドサーバ30のストレージとしての役割を有し、プロセッサ31から出力された各種のデータもしくは情報(例えば、監視カメラCAにより撮像された撮像映像のデータ、ユーザ情報37a、駐車車両情報37b、課金情報37c)を蓄積(保存)する。ユーザ情報37a、駐車車両情報37b、課金情報37cはそれぞれ図1を参照して説明したので、ここでは説明を省略する。撮像映像のデータは、駐車車両の課金計算のエビデンス(証拠)として使用されてもよいし、駐車車両の駐車期間中の監視用映像として使用されてもよい。また、HDD37は、道路地図データを有してよい。 The HDD 37 has a role as a storage of the cloud server 30, and various data or information output from the processor 31 (for example, data of an image captured by the surveillance camera CA, user information 37a, parked vehicle information 37b, etc.). Billing information 37c) is stored (saved). Since the user information 37a, the parked vehicle information 37b, and the billing information 37c have been described with reference to FIG. 1, the description thereof will be omitted here. The captured image data may be used as evidence (evidence) for the charge calculation of the parked vehicle, or may be used as a monitoring image during the parking period of the parked vehicle. Further, the HDD 37 may have road map data.

通信部39は、クラウドサーバ30とネットワーク網NW1を介して通信可能に接続された監視カメラCAもしくは画像処理PC20との間で、データもしくは情報の通信(つまり、送受信)を行う。通信部39は、スマートフォン50から送られた撮像画像(例えば、ユーザが空き駐車スペースに駐車した自車両を被写体として撮像した撮像画像)のデータを受信してプロセッサ31に出力したり、プロセッサ31から送られた各種の検知通知のデータ(後述参照)をスマートフォン50、管理者PC70、外部機関PC80にそれぞれ送信したりする。 The communication unit 39 communicates data or information (that is, transmission / reception) between the cloud server 30 and the surveillance camera CA or the image processing PC 20 that are communicably connected via the network network NW1. The communication unit 39 receives data of an image captured from the smartphone 50 (for example, an image captured by a user parked in an empty parking space as a subject) and outputs the data to the processor 31 or from the processor 31. The data of various detection notifications sent (see below) are transmitted to the smartphone 50, the administrator PC 70, and the external organization PC 80, respectively.

図6に示すように、スマートフォン50は、撮像部509と、制御部506と、記憶部504と、表示/操作部503(例えばタッチパネル)とを含む構成である。スマートフォン50は、例えばユーザにより携帯可能に所持され、クラウドサーバ30から通知された空き駐車スペースの検知通知の画面(図9参照)を表示したり、その空き駐車スペースに駐車されたユーザの車両をそのユーザの操作に基づいて撮像したりする。 As shown in FIG. 6, the smartphone 50 has a configuration including an image pickup unit 509, a control unit 506, a storage unit 504, and a display / operation unit 503 (for example, a touch panel). The smartphone 50 is, for example, portablely possessed by a user, displays a screen for detecting an empty parking space (see FIG. 9) notified from the cloud server 30, or displays a vehicle of a user parked in the empty parking space. An image is taken based on the user's operation.

撮像部509は、可視光を受光可能なレンズ(図示略)と、その可視光に基づく撮像画像を撮像可能なイメージセンサ(図示略)と、イメージセンサの出力に基づいて撮像画像を生成する信号処理部(図示略)とを含む構成である。撮像部509は、スマートフォン50の電源がオンである間に撮像部509の被写体(例えば、ユーザ自身の車両)を撮像し、その被写体の撮像画像を制御部506に送出する。 The image pickup unit 509 includes a lens capable of receiving visible light (not shown), an image sensor capable of capturing an image captured based on the visible light (not shown), and a signal for generating an captured image based on the output of the image sensor. It is a configuration including a processing unit (not shown). The image pickup unit 509 takes an image of a subject (for example, a user's own vehicle) of the image pickup unit 509 while the power of the smartphone 50 is on, and sends the captured image of the subject to the control unit 506.

表示部の一例としての表示/操作部503は、表示部及び操作部が一体化された表示入力部(例えば、タッチパネルディスプレイ)であり、撮像部509により撮像された撮像画像やアイコン等のデータもしくは情報を表示する。表示/操作部503は、クラウドサーバ30から送信された空き駐車スペースの検知通知の画面(図9参照)を制御部506から受け取って表示する。 The display / operation unit 503 as an example of the display unit is a display input unit (for example, a touch panel display) in which the display unit and the operation unit are integrated, and is data such as an image captured image or an icon captured by the image pickup unit 509. Display information. The display / operation unit 503 receives and displays a screen (see FIG. 9) for detecting an empty parking space transmitted from the cloud server 30 from the control unit 506.

記憶部504は、例えばRAMおよびROMを用いて構成され、スマートフォン50の動作に必要なプログラム及びデータをROMで保持するとともに、制御部506におけるプログラムおよびデータを用いた各種の処理実行時にRAMにデータまたは情報を一時的に保持する。 The storage unit 504 is configured by using, for example, a RAM and a ROM, holds programs and data necessary for the operation of the smartphone 50 in the ROM, and data in the RAM when various processes using the programs and data in the control unit 506 are executed. Or keep the information temporarily.

スマートフォン50は、携帯電話網通信プロトコル制御部502と、携帯電話網通信I/F部501とを有し、例えば3G(第3世代移動通信システム)、4G(第4世代移動通信システム)、あるいは5G(第5世代移動通信システム)のいずれの無線通信方式を用いて、携帯電話網(例えば、ネットワーク網NW2)に接続された他の携帯電話機やスマートフォンと無線接続し、画像、音声、映像などの送受信に関する無線通信を行う。 The smartphone 50 has a mobile phone network communication protocol control unit 502 and a mobile phone network communication I / F unit 501, for example, 3G (3rd generation mobile communication system), 4G (4th generation mobile communication system), or Using any of the 5G (5th generation mobile communication system) wireless communication methods, wirelessly connect to other mobile phones and smartphones connected to the mobile phone network (for example, network network NW2), and image, voice, video, etc. Perform wireless communication related to transmission and reception.

スマートフォン50は、音声バス515と、音声入出力制御部505と、SPK(スピーカ)513と、MIC(マイク)512とを有し、外部に対して音声の入出力を行う。 The smartphone 50 has a voice bus 515, a voice input / output control unit 505, an SPK (speaker) 513, and a MIC (microphone) 512, and inputs / outputs voice to the outside.

スマートフォン50は、無線LAN制御部507と、無線LAN通信I/F部508とを有し、無線LANで接続されたルータ(図示略)を介して接続されたカメラ(図示略)等と画像、音声、映像などのデータの送受信を行う。 The smartphone 50 has a wireless LAN control unit 507 and a wireless LAN communication I / F unit 508, and has a camera (not shown) and an image connected via a router (not shown) connected by a wireless LAN. Send and receive data such as voice and video.

また、スマートフォン50は、USB通信I/F部511を有し、USB(Universal Serial Bus)規格のインターフェースを有する機器やメモリ等とデータを送受信する。 Further, the smartphone 50 has a USB communication I / F unit 511, and transmits / receives data to / from a device, a memory, or the like having a USB (Universal Serial Bus) standard interface.

2次電池550は、スマートフォン50の各部に必要な電力を供給する。2次電池550は、ニッケル水素バッテリ、リチウムイオン電池、鉛バッテリ等の充電可能な電池である。 The secondary battery 550 supplies necessary electric power to each part of the smartphone 50. The secondary battery 550 is a rechargeable battery such as a nickel hydrogen battery, a lithium ion battery, or a lead battery.

次に、実施の形態1に係る駐車監視システム100の動作シナリオ(つまり、動作概要)について、図7を参照して説明する。図7は、実施の形態1に係る駐車監視システム100の動作シナリオを時系列に示す説明図である。実施の形態1に係る駐車監視システム100の動作シナリオは、具体的には、シナリオU1,U2,U3,U4,U5,U6,U7,U8の計8個のシナリオから構成される。 Next, an operation scenario (that is, an operation outline) of the parking monitoring system 100 according to the first embodiment will be described with reference to FIG. 7. FIG. 7 is an explanatory diagram showing an operation scenario of the parking monitoring system 100 according to the first embodiment in chronological order. Specifically, the operation scenario of the parking monitoring system 100 according to the first embodiment is composed of a total of eight scenarios of scenarios U1, U2, U3, U4, U5, U6, U7, and U8.

図7に示すように、シナリオU1では、監視カメラCAにより撮像された撮像映像のデータが画像処理PC20により解析されることで、駐車場内の空き駐車スペースの有無が判定(検知)される。この判定(検知)の結果は、画像処理PC20からクラウドサーバ30に通知(送信)される。 As shown in FIG. 7, in the scenario U1, the presence or absence of an empty parking space in the parking lot is determined (detected) by analyzing the data of the captured image captured by the surveillance camera CA by the image processing PC 20. The result of this determination (detection) is notified (transmitted) from the image processing PC 20 to the cloud server 30.

シナリオU2では、クラウドサーバ30は、空き駐車スペースの存在する旨の通知(つまり、空き駐車スペースの検知通知)を生成し、その空き駐車スペースの検知通知をユーザが所持するスマートフォン50に送信する。これにより、ユーザは、スマートフォン50に予めインストールされている専用アプリケーション(上述参照)が起動している間、クラウドサーバ30から通知された空き駐車スペースの検知通知に基づいて表示された画面を閲覧することで、どの場所の駐車場の駐車スペースが空いているかを視覚的に確認できる。 In the scenario U2, the cloud server 30 generates a notification that the vacant parking space exists (that is, a notification of detecting the vacant parking space), and transmits the detection notification of the vacant parking space to the smartphone 50 owned by the user. As a result, the user browses the screen displayed based on the detection notification of the vacant parking space notified from the cloud server 30 while the dedicated application (see above) pre-installed on the smartphone 50 is running. This makes it possible to visually confirm which parking space is available.

シナリオU3では、監視カメラCAにより撮像された撮像映像のデータが画像処理PC20により解析されることで、空き駐車スペースの検知通知を受信したスマートフォン50を所持するユーザの車両が、駐車場内の空き駐車スペースに駐車したことが判定(検知)される。この判定(検知)の結果は、画像処理PC20からクラウドサーバ30に通知(送信)される。 In scenario U3, the data of the captured image captured by the surveillance camera CA is analyzed by the image processing PC 20, and the vehicle of the user who owns the smartphone 50 that has received the detection notification of the vacant parking space is parked in the vacant parking lot. It is determined (detected) that the vehicle is parked in the space. The result of this determination (detection) is notified (transmitted) from the image processing PC 20 to the cloud server 30.

シナリオU4では、ユーザは、クラウドサーバ30からスマートフォン50に送信された空き駐車スペースの検知通知により教示された空き駐車スペースの位置に自身の車両を駐車した後、専用アプリケーション(上述参照)を起動しているスマートフォン50を用いて、自身の車両を被写体として撮像する(つまり、車両の写真を撮る)。スマートフォン50は、ユーザの操作に応じて、撮像された車両の撮像画像を、撮像時刻および位置情報(例えば、スマートフォン50内に内蔵されるGPS受信機により求められる位置情報)を付帯してクラウドサーバ30に送信する。 In scenario U4, the user parks his / her vehicle at the position of the vacant parking space instructed by the detection notification of the vacant parking space transmitted from the cloud server 30 to the smartphone 50, and then activates the dedicated application (see above). Using the smartphone 50, the user takes an image of his / her own vehicle as a subject (that is, takes a picture of the vehicle). In response to the user's operation, the smartphone 50 attaches the captured image of the vehicle to the image capture time and position information (for example, the position information obtained by the GPS receiver built in the smartphone 50) to the cloud server. Send to 30.

シナリオU5では、クラウドサーバ30は、画像処理PC20から送られた空き駐車スペースに駐車した車両の解析結果とスマートフォン50から送られた車両の撮像画像とを比較して両者の特徴情報(例えば、車色、位置)が一致するか否かを判定する。 In scenario U5, the cloud server 30 compares the analysis result of the vehicle parked in the empty parking space sent from the image processing PC 20 with the captured image of the vehicle sent from the smartphone 50, and the characteristic information of both (for example, the car). It is determined whether or not the colors (colors and positions) match.

シナリオU6では、クラウドサーバ30は、シナリオU5での判定において両者の特徴情報(例えば、車色、位置)が一致すると判定した場合、ユーザの車両の空き駐車スペースへの駐車開始を判定する。その後、クラウドサーバ30は、監視カメラCAにより撮像された全方位の撮像映像の中からユーザの車両を含む一部の撮像画像を切り出してスマートフォン50に送信する。これにより、ユーザは、専用アプリケーション(上述参照)が起動しているスマートフォン50において、自身の車両が駐車したことを駐車監視システム100において認識されたことを的確に確認できる。なお、駐車開始が判定された時点で、駐車代金の課金計算の元になる駐車期間が開始される。 In the scenario U6, when the cloud server 30 determines that the characteristic information (for example, vehicle color, position) of the two matches in the determination in the scenario U5, the cloud server 30 determines the start of parking of the user's vehicle in the empty parking space. After that, the cloud server 30 cuts out a part of the captured image including the user's vehicle from the captured images in all directions captured by the surveillance camera CA and transmits it to the smartphone 50. As a result, the user can accurately confirm that the parking monitoring system 100 has recognized that his / her vehicle has parked on the smartphone 50 in which the dedicated application (see above) is running. When the start of parking is determined, the parking period, which is the basis of the calculation of the parking fee, is started.

シナリオU7では、ユーザが駐車していた駐車スペースから自身の車両を退出したとする。監視カメラCAにより撮像された撮像映像のデータが画像処理PC20により解析されることで、駐車場内の駐車スペースからの駐車の終了の有無が判定(検知)される。この判定(検知)の結果(例えば、ユーザの車両の駐車が終了したこと)は、その駐車が終了した(つまり、ユーザの車両が駐車スペースから移動して退出した)時点で検知され、画像処理PC20からクラウドサーバ30に通知(送信)される。なお、駐車終了が判定された時点で、駐車代金の課金計算の元になる駐車期間が終了される。 In scenario U7, it is assumed that the user has left his / her own vehicle from the parking space in which the user was parked. By analyzing the data of the captured image captured by the surveillance camera CA by the image processing PC 20, it is determined (detected) whether or not parking has ended from the parking space in the parking lot. The result of this determination (detection) (for example, the parking of the user's vehicle is completed) is detected at the time when the parking is completed (that is, the user's vehicle moves out of the parking space and exits), and image processing is performed. Notified (transmitted) from the PC 20 to the cloud server 30. When the parking end is determined, the parking period, which is the basis of the parking charge calculation, ends.

シナリオU8では、クラウドサーバ30は、シナリオU7の時点でユーザの車両の駐車期間を正確に算出できるので、駐車期間の長さに応じた課金計算の処理を行えて、駐車代金(金額)と駐車期間(駐車時間)とを含む各種の情報を、ユーザのスマートフォン50に送信する。この後、ユーザの操作により、駐車代金についての決済がなされる。なお、クラウドサーバ30は、課金計算の際に、単に駐車時間の長さで駐車代金を計算する以外に、駐車場(上述参照)の場所(例えばGPS情報)、駐車日時(例えば夜間は安く設定等)、駐車時間の長さ、過去の経験値(例えば、利用率、混雑率)等に応じた料金テーブル(図示略)をHDD37に保持し、その料金テーブルを用いて駐車代金を計算してもよい。例えば、クラウドサーバ30は、料金テーブルを参照し、駐車日時の駐車時間に対応する駐車料金を算出してよい。 In scenario U8, the cloud server 30 can accurately calculate the parking period of the user's vehicle at the time of scenario U7, so that it is possible to process the billing calculation according to the length of the parking period, and the parking price (amount) and parking. Various information including the period (parking time) is transmitted to the user's smartphone 50. After that, the parking fee is settled by the user's operation. In addition to simply calculating the parking price based on the length of the parking time, the cloud server 30 sets the location of the parking lot (see above) (for example, GPS information) and the parking date and time (for example, cheap at night) when calculating the charge. Etc.), the length of parking time, past experience values (for example, utilization rate, congestion rate), etc.), a charge table (not shown) is held in the HDD 37, and the parking price is calculated using the charge table. May be good. For example, the cloud server 30 may refer to the charge table and calculate the parking charge corresponding to the parking time on the parking date and time.

次に、実施の形態1に係る駐車監視システム100の動作手順について、図8~図14を参照して説明する。図8は、図7のシナリオU1,U2の動作手順の一例を示すフローチャートである。図9は、スマートフォン50における空き駐車スペース情報の表示例を示す図である。図10は、図7のシナリオU3,U4,U5,U6の動作手順の一例を示すフローチャートである。図11は、図7のシナリオU7,U8の動作手順の一例を示すフローチャートである。図12は、スマートフォン50における駐車開始の旨の通知画面の表示例を示す図である。図13は、スマートフォン50における駐車終了の旨および課金情報の通知画面の表示例を示す図である。図14は、実施の形態1に係る駐車監視システム100の動作手順の一例を示すシーケンス図である。なお、図10、図11および図14の説明において、図8の説明と重複する内容については同一のステップ番号を付与して説明を簡略化または省略し、異なる内容について説明する。 Next, the operation procedure of the parking monitoring system 100 according to the first embodiment will be described with reference to FIGS. 8 to 14. FIG. 8 is a flowchart showing an example of the operation procedure of the scenarios U1 and U2 of FIG. FIG. 9 is a diagram showing a display example of vacant parking space information on the smartphone 50. FIG. 10 is a flowchart showing an example of the operation procedure of the scenarios U3, U4, U5, and U6 of FIG. FIG. 11 is a flowchart showing an example of the operation procedure of the scenarios U7 and U8 of FIG. FIG. 12 is a diagram showing a display example of a notification screen to the effect that parking has started on the smartphone 50. FIG. 13 is a diagram showing a display example of a notification screen for parking end and billing information on the smartphone 50. FIG. 14 is a sequence diagram showing an example of the operation procedure of the parking monitoring system 100 according to the first embodiment. In the description of FIGS. 10, 11 and 14, the same step number is assigned to the content that overlaps with the description of FIG. 8, and the description is simplified or omitted, and different contents will be described.

図8および図14において、監視カメラCAは、駐車場を含む全方位の撮像映像(撮像画像)をその位置情報(例えばGPS情報)ならびに撮像時刻の情報と対応付けて画像処理PC20に送信する(St1)。画像処理PC20は、監視カメラCAから送られた駐車場を含む全方位の撮像映像(撮像画像)をその位置情報(例えばGPS情報)ならびに撮像時刻の情報と対応付けて受信して取得する(St1)。画像処理PC20は、監視カメラCAから送られた撮像映像を解析することで、駐車場内の所定台数(例えば20台)分の駐車スペースのうち、空き駐車スペースが存在するか否かを判定(検知)する(St2)。画像処理PC20は、空き駐車スペースが存在することを判定(検知)した場合に、駐車場内に空き駐車スペースが存在する旨を示す空き駐車スペース情報(空き駐車スペースの検知通知の一例)をクラウドサーバ30に通知する(St3)。空き駐車スペース情報は、例えば、空き駐車スペースが存在する旨の情報、空き駐車スペースの数(つまり、空き駐車スペースに車両が駐車可能な台数)、位置情報(例えばGPS情報)を含む。 In FIGS. 8 and 14, the surveillance camera CA transmits an omnidirectional captured image (captured image) including a parking lot to the image processing PC 20 in association with its position information (for example, GPS information) and imaging time information ( St1). The image processing PC 20 receives and acquires an omnidirectional captured image (captured image) including a parking lot sent from the surveillance camera CA in association with its position information (for example, GPS information) and imaging time information (St1). ). The image processing PC 20 determines (detects) whether or not there is an empty parking space among the parking spaces for a predetermined number (for example, 20) in the parking lot by analyzing the captured image sent from the surveillance camera CA. ) (St2). When the image processing PC 20 determines (detects) that an empty parking space exists, the cloud server provides vacant parking space information (an example of a vacant parking space detection notification) indicating that the vacant parking space exists in the parking lot. Notify 30 (St3). The vacant parking space information includes, for example, information indicating that there is a vacant parking space, the number of vacant parking spaces (that is, the number of vehicles that can be parked in the vacant parking space), and location information (for example, GPS information).

クラウドサーバ30は、画像処理PC20から送られた空き駐車スペース情報を受信してHDD37に蓄積(保存)する(St4)。クラウドサーバ30は、専用アプリケーション(上述参照)を起動中の少なくとも1台のスマートフォン50から定期的にそのスマートフォン50の位置情報(例えばGPS情報)の通知を受ける(St5)。クラウドサーバ30は、ステップSt5において通知されたそれぞれのスマートフォン50の位置情報(例えばGPS情報)と、空き駐車スペースの位置情報(つまり、監視カメラCAの位置情報)とを比較する(St6)。クラウドサーバ30は、空き駐車スペースの位置情報の付近(例えば半径300m以内)に存在する少なくとも1台のスマートフォン50に対し、空き駐車スペース情報をプッシュ通知(能動的送信の一例)する(St6)。これにより、空き駐車スペースの近くにいるユーザは、スマートフォン50の専用アプリケーション(上述参照)を起動中に近くの駐車場で空き駐車スペースが存在することを、その空き駐車スペースから離れた位置にいる場合でも認識できるので、その空き駐車スペースに車両で移動できて駐車できるため、利便性を向上できる。 The cloud server 30 receives the vacant parking space information sent from the image processing PC 20 and stores (saves) it in the HDD 37 (St4). The cloud server 30 periodically receives notification of the location information (for example, GPS information) of the smartphone 50 from at least one smartphone 50 in which the dedicated application (see above) is running (St5). The cloud server 30 compares the position information (for example, GPS information) of each smartphone 50 notified in step St5 with the position information of the vacant parking space (that is, the position information of the surveillance camera CA) (St6). The cloud server 30 pushes the vacant parking space information (an example of active transmission) to at least one smartphone 50 existing in the vicinity of the position information of the vacant parking space (for example, within a radius of 300 m) (St6). As a result, the user who is near the vacant parking space is located away from the vacant parking space so that the vacant parking space exists in the nearby parking lot while the dedicated application (see above) of the smartphone 50 is running. Since it can be recognized even in a case, it is possible to move to the vacant parking space by vehicle and park it, so that convenience can be improved.

図9には、図8および図14のステップSt6においてクラウドサーバ30からプッシュ通知された空き駐車スペース情報に基づいて、スマートフォン50により求められた各種の情報を含む表示画面が示されている。この表示画面では、スマートフォン50は、空き駐車スペースが存在する位置情報DST1と、スマートフォン50の現在位置CPS1と、その現在位置CPS1から位置情報DST1までの経路RT1と、その経路RT1の移動に必要な距離DIS1とを表示する。また、スマートフォン50は、経路RT1上に交差点がある場合にその交差点の進行方向を示すアイコンDIR1を表示してもよい。これにより、ユーザは、スマートフォン50に表示された表示画面(図9参照)を閲覧することで、目的地である空き駐車スペースの位置まで簡単に移動でき、利便性の向上が図られる。 FIG. 9 shows a display screen including various information requested by the smartphone 50 based on the vacant parking space information pushed from the cloud server 30 in step St6 of FIGS. 8 and 14. On this display screen, the smartphone 50 is required to move the position information DST1 in which an empty parking space exists, the current position CPS1 of the smartphone 50, the route RT1 from the current position CPS1 to the position information DST1, and the route RT1. The distance DIS1 and is displayed. Further, the smartphone 50 may display the icon DIR1 indicating the traveling direction of the intersection when there is an intersection on the route RT1. As a result, the user can easily move to the position of the vacant parking space, which is the destination, by browsing the display screen (see FIG. 9) displayed on the smartphone 50, and the convenience is improved.

図10および図14において、監視カメラCAは、駐車場を含む全方位の撮像映像(撮像画像)をその位置情報(例えばGPS情報)ならびに撮像時刻の情報と対応付けて画像処理PC20に送信する(St1)。画像処理PC20は、監視カメラCAから送られた撮像映像を解析することで、ステップSt2(図8参照)において検知された空き駐車スペースに車両CRxが新たに駐車したか否かを判定(検知)する(St11)。画像処理PC20は、空き駐車スペースに車両CRxが新たに駐車したと判定した場合に、その車両CRxに関する情報を解析して抽出する(St11)。この車両CRxに関する情報は、例えば車両CRxの駐車した駐車スペースの位置情報、車両CRxの車色情報、監視カメラCAから送られた撮像映像中の車両CRxの部分を切り出した部分的な撮像画像のデータを含み、以下では便宜的に「車両解析情報」という。画像処理PC20は、ステップSt11において得られた車両解析情報をクラウドサーバ30に通知(送信)する(St12)。 In FIGS. 10 and 14, the surveillance camera CA transmits an omnidirectional captured image (captured image) including a parking lot to the image processing PC 20 in association with its position information (for example, GPS information) and imaging time information ( St1). The image processing PC 20 determines (detects) whether or not the vehicle CRx is newly parked in the empty parking space detected in step St2 (see FIG. 8) by analyzing the captured image sent from the surveillance camera CA. (St11). When it is determined that the vehicle CRx is newly parked in the vacant parking space, the image processing PC 20 analyzes and extracts information about the vehicle CRx (St11). The information about the vehicle CRx is, for example, the position information of the parked parking space of the vehicle CRx, the vehicle color information of the vehicle CRx, and the partially captured image obtained by cutting out the portion of the vehicle CRx in the captured image sent from the surveillance camera CA. It includes data and is referred to below as "vehicle analysis information" for convenience. The image processing PC 20 notifies (transmits) the vehicle analysis information obtained in step St11 to the cloud server 30 (St12).

クラウドサーバ30は、画像処理PC20から送られた車両解析情報を受信してHDD37に蓄積(保存)する(St13)。一方、図8のステップSt6でプッシュ通知を受けたスマートフォン50のユーザは、自身の車両CR1を運転して空き駐車スペース情報により指定された空き駐車スペースに移動して駐車したとする。この駐車後、ユーザは、スマートフォン50を用いて、自身の車両CR1を被写体として撮影する。スマートフォン50は、車両CR1の撮像画像のデータとスマートフォン50の現在の位置情報(言い換えると、空き駐車スペース情報の位置情報)とを対応付けてクラウドサーバ30に送信する(St14)。 The cloud server 30 receives the vehicle analysis information sent from the image processing PC 20 and stores (saves) it in the HDD 37 (St13). On the other hand, it is assumed that the user of the smartphone 50 who received the push notification in step St6 of FIG. 8 drives his / her own vehicle CR1 and moves to the vacant parking space designated by the vacant parking space information and parks. After this parking, the user uses the smartphone 50 to take a picture of his / her own vehicle CR1 as a subject. The smartphone 50 associates the captured image data of the vehicle CR1 with the current position information of the smartphone 50 (in other words, the position information of the vacant parking space information) and transmits the data to the cloud server 30 (St14).

クラウドサーバ30は、ステップSt13において受信された車両CRxの車両解析情報とステップSt14においてスマートフォン50から送られた車両CR1の撮像画像およびスマートフォン50の現在の位置情報とを比較し、両者がマッチング(一致)するか否かを判定する(St15、駐車開始判断処理)。クラウドサーバ30は、車両CRxの車両解析情報と車両CR1の撮像画像およびスマートフォン50の現在の位置情報とが一致したと判定した場合に、車両CRxと車両CR1とは同一車両であると判定する。クラウドサーバ30は、車両CRx(=車両CR1)の駐車開始を判断し(St16)、駐車開始の旨を含む駐車開始情報をHDD37の駐車車両情報37bとして記録するとともにスマートフォン50に通知(送信)する(St16)。駐車開始情報は、例えば、車両CRx(=車両CR1)の駐車が開始された旨および駐車開始時刻の情報、車両CRxの部分が枠WK1(つまり、駐車判定枠)付きで切り出された部分的な撮像画像のデータ、車両CRxの駐車位置(例えばGPS情報)を含む。これにより、空き駐車スペースに車両CRx(=車両CR1)を駐車したユーザは、スマートフォン50の専用アプリケーション(上述参照)を起動中に自身の車両CRx(=CR1)を駐車したことが駐車監視システム100において認識されたことをスマートフォン50に表示される表示画面(図12参照)を介して把握でき、駐車違反と警察等により判断されることが無く、安心して駐車位置から離れることができる。 The cloud server 30 compares the vehicle analysis information of the vehicle CRx received in step St13 with the captured image of the vehicle CR1 sent from the smartphone 50 in step St14 and the current position information of the smartphone 50, and both match (match). ) Is determined (St15, parking start determination process). When the cloud server 30 determines that the vehicle analysis information of the vehicle CRx matches the captured image of the vehicle CR1 and the current position information of the smartphone 50, the cloud server 30 determines that the vehicle CRx and the vehicle CR1 are the same vehicle. The cloud server 30 determines the parking start of the vehicle CRx (= vehicle CR1) (St16), records the parking start information including the parking start as the parked vehicle information 37b of the HDD 37, and notifies (transmits) to the smartphone 50. (St16). The parking start information is, for example, information that the parking of the vehicle CRx (= vehicle CR1) has started, information on the parking start time, and a partial portion of the vehicle CRx is cut out with a frame WK1 (that is, a parking determination frame). The data of the captured image and the parking position of the vehicle CRx (for example, GPS information) are included. As a result, the user who parked the vehicle CRx (= vehicle CR1) in the vacant parking space parked his / her own vehicle CRx (= CR1) while the dedicated application (see above) of the smartphone 50 was activated. It can be grasped through the display screen (see FIG. 12) displayed on the smartphone 50, and it is possible to leave the parking position with peace of mind without being judged as a parking violation by the police or the like.

図11および図14において、監視カメラCAは、駐車場を含む全方位の撮像映像(撮像画像)をその位置情報(例えばGPS情報)ならびに撮像時刻の情報と対応付けて画像処理PC20に送信する(St1)。画像処理PC20は、監視カメラCAから送られた撮像映像を解析することで、空き駐車スペース(言い換えると、図10のステップSt14の時点で駐車していた車両CRx(=車両CR1)が退出して空き駐車スペースとなった駐車スペース)の有無を判定(検知)する(St21)。画像処理PC20は、その空き駐車スペースが存在すると判定した場合に、空き駐車スペースが存在する旨を示す空き駐車スペース情報(空き駐車スペースの検知通知の一例)をクラウドサーバ30に通知する(St22)。空き駐車スペース情報は、例えば、空き駐車スペースが存在する旨の情報、位置情報(例えばGPS情報)を含む。 In FIGS. 11 and 14, the surveillance camera CA transmits an omnidirectional captured image (captured image) including a parking lot to the image processing PC 20 in association with its position information (for example, GPS information) and imaging time information ( St1). The image processing PC 20 analyzes the captured image sent from the surveillance camera CA, so that the empty parking space (in other words, the vehicle CRx (= vehicle CR1) parked at the time of step St14 in FIG. 10 exits. It is determined (detected) whether or not there is a parking space that has become an empty parking space (St21). When the image processing PC 20 determines that the vacant parking space exists, the image processing PC 20 notifies the cloud server 30 of the vacant parking space information (an example of the detection notification of the vacant parking space) indicating that the vacant parking space exists (St22). .. The vacant parking space information includes, for example, information indicating that an vacant parking space exists and location information (for example, GPS information).

クラウドサーバ30は、画像処理PC20から送られた空き駐車スペース情報を受信してHDD37に蓄積(保存)する(St23)。クラウドサーバ30は、ステップSt23において受信された空き駐車スペース情報に含まれる空き駐車スペースの位置と一致する駐車位置を有する駐車車両情報37bをHDD37から読み出す。クラウドサーバ30は、その読み出された駐車車両情報37bに含まれる駐車開始時刻から現在時刻までの期間の長さを駐車期間と決定し、駐車期間の長さに応じた駐車代金の課金計算を行う(St24)。クラウドサーバ30は、読み出された駐車車両情報37bにより指定される車両(例えば車両CR1)の駐車の終了を判断し(駐車終了判断処理)、駐車終了の旨を含む駐車終了情報をHDD37の駐車車両情報37bとして更新して記録するとともにスマートフォン50に通知(送信)する(St25)。駐車終了情報は、例えば、車両CRx(=車両CR1)の駐車が終了された旨および駐車終了時刻の情報、駐車開始時刻から駐車終了時刻までの期間の長さの情報、課金計算結果である駐車代金の情報を含む。これにより、駐車スペースから車両CR1を退出させたユーザは、スマートフォン50の専用アプリケーション(上述参照)を起動中に自身の車両CRx(=CR1)の駐車の終了が駐車監視システム100において認識されたことをスマートフォン50に表示される表示画面(図13参照)を介して把握でき、駐車期間に応じた正確な課金計算結果(つまり、駐車代金)を確認でき、利便性の向上が図られる。 The cloud server 30 receives the vacant parking space information sent from the image processing PC 20 and stores (saves) it in the HDD 37 (St23). The cloud server 30 reads out the parked vehicle information 37b having a parking position that matches the position of the vacant parking space included in the vacant parking space information received in step St23 from the HDD 37. The cloud server 30 determines the length of the period from the parking start time to the current time included in the read parked vehicle information 37b as the parking period, and calculates the parking fee charge according to the length of the parking period. Do (St24). The cloud server 30 determines the end of parking of the vehicle (for example, vehicle CR1) specified by the read parked vehicle information 37b (parking end determination process), and parks the HDD 37 with parking end information including the fact that the parking has ended. It is updated and recorded as vehicle information 37b, and is notified (transmitted) to the smartphone 50 (St25). The parking end information includes, for example, information that the parking of the vehicle CRx (= vehicle CR1) has been completed, information on the parking end time, information on the length of the period from the parking start time to the parking end time, and parking which is a billing calculation result. Includes price information. As a result, the user who exits the vehicle CR1 from the parking space recognizes the end of parking of his / her own vehicle CRx (= CR1) in the parking monitoring system 100 while activating the dedicated application (see above) of the smartphone 50. Can be grasped through the display screen (see FIG. 13) displayed on the smartphone 50, and the accurate billing calculation result (that is, the parking fee) according to the parking period can be confirmed, and the convenience is improved.

図12には、図10および図14のステップSt16においてクラウドサーバ30から通知された駐車開始情報に基づいて、スマートフォン50により生成された表示画面が示されている。この表示画面では、スマートフォン50は、車両CRx(=車両CR1)の部分が枠WK1(つまり、駐車判定枠)付きで切り出された部分的な撮像画像IMG1のデータと、車両CRx(=車両CR1)の駐車位置PS1(例えばGPS情報)と、車両CRx(=車両CR1)の駐車が開始された旨、その年月日および時刻の情報NTB1とを表示する。これにより、ユーザは、スマートフォン50に表示された表示画面(図12参照)を閲覧することで、自身の車両CRx(=車両CR1)の駐車が開始されたことを視覚的かつ簡易に把握でき、利便性が図られる。 FIG. 12 shows a display screen generated by the smartphone 50 based on the parking start information notified from the cloud server 30 in step St16 of FIGS. 10 and 14. On this display screen, the smartphone 50 has the data of the partially captured image IMG1 in which the vehicle CRx (= vehicle CR1) portion is cut out with the frame WK1 (that is, the parking determination frame), and the vehicle CRx (= vehicle CR1). The parking position PS1 (for example, GPS information) and the information NTB1 of the date and time that the parking of the vehicle CRx (= vehicle CR1) has started are displayed. As a result, the user can visually and easily grasp that the parking of his / her own vehicle CRx (= vehicle CR1) has started by browsing the display screen (see FIG. 12) displayed on the smartphone 50. Convenience is achieved.

図13には、図11および図14のステップSt25においてクラウドサーバ30から通知された駐車終了情報に基づいて、スマートフォン50により生成された表示画面が示されている。この表示画面では、スマートフォン50は、車両CRx(=車両CR1)の駐車が終了された旨、その年月日および時刻の情報NTE1と、駐車開始時刻から駐車終了時刻までの期間の長さの情報、課金計算結果である駐車代金の情報CHG1とを表示する。これにより、ユーザは、スマートフォン50に表示された表示画面(図13参照)を閲覧することで、駐車開始から駐車終了までの正確な駐車期間に応じた課金計算結果(つまり、駐車代金)を視覚的かつ簡易に確認でき、利便性の向上が図られる。 FIG. 13 shows a display screen generated by the smartphone 50 based on the parking end information notified from the cloud server 30 in step St25 of FIGS. 11 and 14. On this display screen, the smartphone 50 indicates that the parking of the vehicle CRx (= vehicle CR1) has been completed, the information NTE1 of the date and time, and the information of the length of the period from the parking start time to the parking end time. , The parking price information CHG1 which is the billing calculation result is displayed. As a result, the user can visually view the billing calculation result (that is, the parking fee) according to the accurate parking period from the start of parking to the end of parking by viewing the display screen (see FIG. 13) displayed on the smartphone 50. It can be confirmed easily and easily, and convenience is improved.

以上により、実施の形態1に係る駐車監視システム100は、駐車場を撮像可能に設置された監視カメラCAと映像処理装置(例えば、画像処理PC20およびクラウドサーバ30)が通信可能に接続される。監視カメラCAは、駐車場の撮像映像を映像処理装置に繰り返し送信する。映像処理装置(例えば、画像処理PC20)は、監視カメラCAから送られた撮像映像に基づいて、駐車場における車両の空き駐車スペースの有無を検知する。映像処理装置(例えば、クラウドサーバ30)は、空き駐車スペースが検知された場合に、空き駐車スペースの検知通知を少なくとも1台のスマートフォン50に送信する。 As described above, in the parking monitoring system 100 according to the first embodiment, the surveillance camera CA installed so as to be able to image the parking lot and the image processing device (for example, the image processing PC 20 and the cloud server 30) are communicably connected to each other. The surveillance camera CA repeatedly transmits the captured image of the parking lot to the image processing device. The image processing device (for example, the image processing PC 20) detects the presence or absence of an empty parking space of the vehicle in the parking lot based on the captured image sent from the surveillance camera CA. When the vacant parking space is detected, the video processing device (for example, the cloud server 30) transmits a detection notification of the vacant parking space to at least one smartphone 50.

これにより、駐車監視システム100は、車両が駐車場内の駐車スペースに駐車する前の時点で、その駐車場内で空き状態の駐車スペースの有無を監視カメラCAの撮像映像に基づいて的確に検知できる。駐車監視システム100は、駐車場内に空き駐車スペースが存在することを検知できた場合には、ドライバー等のユーザが所持するスマートフォン50に迅速に通知できるので、ユーザが乗車する車両の駐車を適切に支援できてユーザの利便性を効果的に向上できる。 As a result, the parking monitoring system 100 can accurately detect the presence or absence of an empty parking space in the parking lot based on the image captured by the surveillance camera CA before the vehicle parks in the parking space in the parking lot. When the parking monitoring system 100 can detect the existence of an empty parking space in the parking lot, the parking monitoring system 100 can promptly notify the smartphone 50 owned by the user such as a driver, so that the user can properly park the vehicle. It can be supported and the convenience of the user can be effectively improved.

また、監視カメラCAは、駐車場の位置情報に対応する監視カメラCAの位置情報を撮像映像とともに映像処理装置(例えば、画像処理PC20)に送信する。映像処理装置(例えば、クラウドサーバ30)は、監視カメラCAの位置情報を含めて空き駐車スペースの検知通知を送信する。これにより、スマートフォン50を所持するユーザは、空き駐車スペースの位置情報を、例えばスマートフォン50の現在位置情報と見比べながらどのように移動すれば良いかを迅速に判断できるので、空き駐車スペースまでの経路を的確に確認できてスムーズに空き駐車スペースの位置まで移動でき、利便性が効果的に図られる。 Further, the surveillance camera CA transmits the position information of the surveillance camera CA corresponding to the position information of the parking lot to the image processing device (for example, the image processing PC 20) together with the captured image. The video processing device (for example, the cloud server 30) transmits a detection notification of an empty parking space including the position information of the surveillance camera CA. As a result, the user who owns the smartphone 50 can quickly determine how to move while comparing the location information of the vacant parking space with, for example, the current location information of the smartphone 50, so that the route to the vacant parking space can be determined. Can be confirmed accurately and can be smoothly moved to the position of an empty parking space, which is effective for convenience.

また、映像処理装置(例えば、クラウドサーバ30)は、複数のスマートフォン50のそれぞれから繰り返して送信される位置情報を受信し、複数のスマートフォン50のそれぞれの位置情報と監視カメラCAの位置情報とに基づいて、監視カメラCAの位置情報の近傍に存在する少なくとも1台のスマートフォン50に、空き駐車スペースの検知通知を能動的に送信する(つまり、プッシュ通知する)。これにより、空き駐車スペースの近くにいるユーザは、スマートフォン50の専用アプリケーション(上述参照)を起動中に近くの駐車場で空き駐車スペースが存在することを、その空き駐車スペースから離れた位置にいる場合でも認識できるので、その空き駐車スペースに車両で移動できて駐車できるため、利便性を向上できる。 Further, the video processing device (for example, the cloud server 30) receives the position information repeatedly transmitted from each of the plurality of smartphones 50, and uses the position information of each of the plurality of smartphones 50 and the position information of the surveillance camera CA. Based on this, the detection notification of the vacant parking space is actively transmitted (that is, the push notification) to at least one smartphone 50 existing in the vicinity of the position information of the surveillance camera CA. As a result, the user who is near the vacant parking space is located away from the vacant parking space so that the vacant parking space exists in the nearby parking lot while the dedicated application (see above) of the smartphone 50 is running. Since it can be recognized even in a case, it is possible to move to the vacant parking space by vehicle and park it, so that convenience can be improved.

また、映像処理装置(例えば、クラウドサーバ30)は、少なくとも空き駐車スペースの位置情報をスマートフォン50に表示させる。これにより、ユーザは、スマートフォン50に表示された表示画面(図9参照)を閲覧することで、目的地である空き駐車スペースの位置まで簡単に移動でき、利便性の向上が図られる。 Further, the video processing device (for example, the cloud server 30) causes the smartphone 50 to display at least the position information of the vacant parking space. As a result, the user can easily move to the position of the vacant parking space, which is the destination, by browsing the display screen (see FIG. 9) displayed on the smartphone 50, and the convenience is improved.

また、映像処理装置(例えば、画像処理PC20)は、監視カメラCAから送られた撮像映像に基づいて、空き駐車スペースに駐車した駐車車両に関する情報を解析する。映像処理装置(例えば、クラウドサーバ30)は、解析された駐車車両に関する情報と、空き駐車スペースに車両を駐車させたユーザが所持するスマートフォン50から送られた車両情報とのマッチング(一致)に応じて、空き駐車スペースにおけるユーザの車両の駐車を判定し、駐車開始の旨をユーザのスマートフォン50に送信する。これにより、空き駐車スペースに車両CRx(=車両CR1)を駐車したユーザは、スマートフォン50の専用アプリケーション(上述参照)を起動中に自身の車両CRx(=CR1)を駐車したことが駐車監視システム100において認識されたことをスマートフォン50に表示される表示画面(図12参照)を介して把握でき、駐車違反と警察等により判断されることが無く、安心して駐車位置から離れることができる。 Further, the image processing device (for example, the image processing PC 20) analyzes the information about the parked vehicle parked in the vacant parking space based on the captured image sent from the surveillance camera CA. The video processing device (for example, the cloud server 30) responds to matching (matching) between the analyzed information on the parked vehicle and the vehicle information sent from the smartphone 50 possessed by the user who parked the vehicle in the vacant parking space. Then, it is determined that the user's vehicle is parked in the vacant parking space, and the parking start is transmitted to the user's smartphone 50. As a result, the user who parked the vehicle CRx (= vehicle CR1) in the vacant parking space parked his / her own vehicle CRx (= CR1) while activating the dedicated application (see above) of the smartphone 50. It can be grasped through the display screen (see FIG. 12) displayed on the smartphone 50, and it is possible to leave the parking position with peace of mind without being judged as a parking violation by the police or the like.

また、映像処理装置(例えば、クラウドサーバ30)は、解析された駐車車両に関する情報に含まれる位置情報および車色情報と、車両情報に含まれる車両の位置情報および車色情報とが略一致した場合に、空き駐車スペースにおけるユーザの車両の駐車を判定する。これにより、映像処理装置(例えば、クラウドサーバ30)は、空き駐車スペースに駐車した車両の特徴(例えば車色)と駐車位置とが略一致したことで、監視カメラCAから送られた撮像映像とユーザ本人が撮像した自車両の撮像画像とが整合したことを正確に検知できる。 Further, in the video processing device (for example, the cloud server 30), the position information and the vehicle color information included in the analyzed information about the parked vehicle and the vehicle position information and the vehicle color information included in the vehicle information substantially match. In this case, it is determined that the user's vehicle is parked in the vacant parking space. As a result, the image processing device (for example, the cloud server 30) substantially matches the characteristics (for example, the vehicle color) of the vehicle parked in the vacant parking space and the parking position, so that the image is captured by the surveillance camera CA. It is possible to accurately detect that the captured image of the own vehicle captured by the user himself / herself matches.

また、映像処理装置(例えば、クラウドサーバ30)は、少なくとも空き駐車スペースの駐車開始の旨と駐車開始時刻とをスマートフォン50に表示させる。これにより、ユーザは、スマートフォン50に表示された表示画面(図12参照)を閲覧することで、自身の車両CRx(=車両CR1)の駐車が開始されたことを視覚的かつ簡易に把握でき、利便性が図られる。 Further, the video processing device (for example, the cloud server 30) causes the smartphone 50 to display at least the fact that the parking of the vacant parking space has started and the parking start time. As a result, the user can visually and easily grasp that the parking of his / her own vehicle CRx (= vehicle CR1) has started by browsing the display screen (see FIG. 12) displayed on the smartphone 50. Convenience is achieved.

また、映像処理装置(例えば、クラウドサーバ30)は、監視カメラCAから送られた撮像映像に基づいて、駐車車両が駐車していた駐車スペースが空き駐車スペースになったことの検知に応じて、駐車車両の駐車の終了を判定し、駐車終了の旨を駐車車両に対応するユーザのスマートフォン50に送信する。これにより、駐車スペースから車両CR1を退出させたユーザは、スマートフォン50の専用アプリケーション(上述参照)を起動中に自身の車両CRx(=CR1)の駐車の終了が駐車監視システム100において認識されたことをスマートフォン50に表示される表示画面(図13参照)を介して把握でき、駐車期間に応じた正確な課金計算結果(つまり、駐車代金)を確認でき、利便性の向上が図られる。 Further, the video processing device (for example, the cloud server 30) responds to the detection that the parking space in which the parked vehicle is parked has become an empty parking space based on the captured image sent from the surveillance camera CA. It is determined that the parking of the parked vehicle has ended, and the fact that the parking has ended is transmitted to the smartphone 50 of the user corresponding to the parked vehicle. As a result, the user who exits the vehicle CR1 from the parking space recognizes the end of parking of his / her own vehicle CRx (= CR1) in the parking monitoring system 100 while activating the dedicated application (see above) of the smartphone 50. Can be grasped through the display screen (see FIG. 13) displayed on the smartphone 50, and the accurate billing calculation result (that is, the parking fee) according to the parking period can be confirmed, and the convenience is improved.

また、映像処理装置(例えば、クラウドサーバ30)は、駐車車両の駐車開始時刻から駐車終了時刻までの期間に応じた課金計算を行い、課金計算に基づく課金情報を対応するスマートフォン50に表示させる。これにより、ユーザは、スマートフォン50に表示された表示画面(図13参照)を閲覧することで、駐車開始から駐車終了までの正確な駐車期間に応じた課金計算結果(つまり、駐車代金)を視覚的かつ簡易に確認でき、利便性の向上が図られる。 Further, the video processing device (for example, the cloud server 30) performs billing calculation according to the period from the parking start time to the parking end time of the parked vehicle, and displays the billing information based on the billing calculation on the corresponding smartphone 50. As a result, the user can visually view the billing calculation result (that is, the parking fee) according to the accurate parking period from the start of parking to the end of parking by viewing the display screen (see FIG. 13) displayed on the smartphone 50. It can be confirmed easily and easily, and convenience is improved.

(実施の形態2の内容に至る経緯)
上述した特許文献1では、検知装置により、車両が駐車区画に駐車したことが検知されたり、その駐車の継続時間が計時されたりすることは行われる。画像取込装置は駐車区域を監視するが、その一方で、車両が駐車区画に駐車する前の時点でどの駐車区画が空き状態であるかを検知すること、また、その駐車区画に駐車する車両が駐車の許された車両であるか否かを判断することは考慮されていない。従って、特許文献1の構成では、予め許可された人物以外の人物の車両の駐車が禁止される駐車禁止エリアにおいて、その人物(例えばサービス会員として予め登録されたユーザ)の車両が駐車したか否かを的確に判別することはできなかった。このため、許可されていない人物が駐車した場合に、その駐車を取り締まることができず、本来そのエリアに駐車が許可された人物が駐車できない可能性があり、その人物の利便性の向上を図ることが困難であった。
(Background to the contents of the second embodiment)
In the above-mentioned Patent Document 1, the detection device detects that the vehicle is parked in the parking lot and measures the duration of the parking. The image capture device monitors the parking area, while detecting which parking area is empty before the vehicle parks in the parking area, and the vehicle parked in that parking area. It is not considered to determine if is a vehicle that is allowed to park. Therefore, in the configuration of Patent Document 1, whether or not the vehicle of the person (for example, a user registered in advance as a service member) has parked in the parking prohibited area where the parking of the vehicle of a person other than the person permitted in advance is prohibited. It was not possible to accurately determine whether or not. For this reason, if an unauthorized person parks, the parking cannot be controlled, and there is a possibility that the person who was originally permitted to park in the area cannot park, and the convenience of that person is improved. It was difficult.

そこで、以下の実施の形態2では、監視対象のエリアに空き状態の駐車スペースが存在する場合に、予め許可された人物の車両が駐車したか否かを的確に判別し、そのエリアにおける駐車の効果的な取り締まりを支援する駐車場監視システム、駐車場監視方法および記録媒体の例を説明する。 Therefore, in the second embodiment below, when there is an empty parking space in the area to be monitored, it is accurately determined whether or not a vehicle of a person permitted in advance has parked, and parking in that area is performed. Examples of parking lot monitoring systems, parking lot monitoring methods and recording media that support effective crackdowns will be described.

(実施の形態2)
実施の形態2では、駐車監視システムは、予め許可された人物(例えばサービス会員として予め登録されたユーザ)以外の人物の車両の駐車が禁止される駐車禁止エリアを撮像可能に設置されたカメラから繰り返して送られる撮像映像に基づいて、駐車スペースの空きが存在するか否かを検知する。駐車監視システムは、駐車禁止エリアに空き駐車スペースを検知し、かつその空き駐車スペースにおける車両の駐車を検知した場合に、駐車違反の検知通知を外部端末に送信する。以下、予め許可された人物(例えばサービス会員として予め登録されたユーザ)の車両の駐車が許され、一方、サービス会員として予め登録されていない人物の車両の駐車が禁止される駐車禁止エリアを、便宜的に「駐車禁止エリア」という。
(Embodiment 2)
In the second embodiment, the parking monitoring system is from a camera installed so as to be able to image a parking prohibited area in which parking of a vehicle of a person other than a person authorized in advance (for example, a user registered in advance as a service member) is prohibited. Based on the repeatedly transmitted images, it is detected whether or not there is a vacant parking space. When the parking monitoring system detects an empty parking space in a parking prohibited area and detects the parking of a vehicle in the empty parking space, the parking monitoring system sends a parking violation detection notification to an external terminal. In the following, the parking prohibited area where the parking of the vehicle of a person who is permitted in advance (for example, a user who is pre-registered as a service member) is permitted, while the parking of the vehicle of a person who is not pre-registered as a service member is prohibited. For convenience, it is called a "no parking area".

実施の形態2に係る駐車監視システムの構成は、実施の形態1に係る駐車監視システムの構成と同一であるため、同一の構成については同一の符号を付与して説明を簡略化または省略し、異なる内容について説明する。 Since the configuration of the parking monitoring system according to the second embodiment is the same as the configuration of the parking monitoring system according to the first embodiment, the same reference numerals are given to the same configuration to simplify or omit the description. Explain the different contents.

先ず、実施の形態2に係る駐車監視システム100の動作シナリオ(つまり、動作概要)について、図15を参照して説明する。図15は、実施の形態2に係る駐車監視システム100の動作シナリオを時系列に示す説明図である。実施の形態2に係る駐車監視システム100の動作シナリオは、具体的には、シナリオV1,V2,V3,V4の計4個のシナリオから構成される。 First, an operation scenario (that is, an operation outline) of the parking monitoring system 100 according to the second embodiment will be described with reference to FIG. FIG. 15 is an explanatory diagram showing an operation scenario of the parking monitoring system 100 according to the second embodiment in chronological order. Specifically, the operation scenario of the parking monitoring system 100 according to the second embodiment is composed of a total of four scenarios V1, V2, V3, and V4.

図15に示すように、シナリオV1では、実施の形態1に係るシナリオU1と同様に、監視カメラCAにより撮像された撮像映像のデータが画像処理PC20により解析されることで、駐車禁止エリア内の空き駐車スペースの有無が判定(検知)される。この判定(検知)の結果は、画像処理PC20からクラウドサーバ30に通知(送信)される。 As shown in FIG. 15, in the scenario V1, similarly to the scenario U1 according to the first embodiment, the data of the captured image captured by the surveillance camera CA is analyzed by the image processing PC 20 to be in the parking prohibited area. The presence or absence of an empty parking space is determined (detected). The result of this determination (detection) is notified (transmitted) from the image processing PC 20 to the cloud server 30.

シナリオV2では、駐車禁止エリア内への駐車が許可されていない人物(例えばサービス会員として予め登録されていない人物)が駐車禁止エリア内の空き駐車スペースに駐車したとする。画像処理PC20は、この空き駐車スペースに車両が駐車した旨をクラウドサーバ30に通知(送信)する。なお、画像処理PC20は、駐車禁止エリアに駐車した車両のドライバーがその駐車禁止エリア内への駐車が許可されている人物であるか否かの判定は行わず、単に駐車禁止エリア内の空き駐車スペースへの車両の駐車があったことを検知する。 In scenario V2, it is assumed that a person who is not permitted to park in the parking prohibited area (for example, a person who is not registered in advance as a service member) parks in an empty parking space in the parking prohibited area. The image processing PC 20 notifies (transmits) to the cloud server 30 that the vehicle is parked in this vacant parking space. The image processing PC 20 does not determine whether or not the driver of the vehicle parked in the parking prohibited area is a person who is permitted to park in the parking prohibited area, and simply parks vacant in the parking prohibited area. Detects that the vehicle has been parked in the space.

シナリオV3では、クラウドサーバ30は、画像処理PC20から送られた通知を受信するが、実施の形態1のように駐車した人物が所持するスマートフォンからの車両の撮像画像を受信しない。このため、クラウドサーバ30は、画像処理PC20から送られた通知に対応する空き駐車スペースに車両を駐車した人物は駐車禁止エリア内への駐車が許可されていない人物であると(つまり、駐車違反が発生したと)判定する。 In the scenario V3, the cloud server 30 receives the notification sent from the image processing PC 20, but does not receive the captured image of the vehicle from the smartphone owned by the parked person as in the first embodiment. Therefore, the cloud server 30 states that the person who parked the vehicle in the vacant parking space corresponding to the notification sent from the image processing PC 20 is a person who is not permitted to park in the parking prohibited area (that is, a parking violation). Is determined to have occurred).

シナリオV4では、クラウドサーバ30は、駐車監視システム100の管理者PC70もしくは外部機関PC80に対し、駐車違反が発生した旨の通知を送信する。 In scenario V4, the cloud server 30 transmits a notification that a parking violation has occurred to the administrator PC 70 of the parking monitoring system 100 or the external organization PC 80.

次に、実施の形態2に係る駐車監視システム100の動作手順について、図16~図19を参照して説明する。図16は、図15のシナリオV2,V3,V4の動作手順の一例を示すフローチャートである。図17は、スマートフォン50における駐車違反車両画面の表示例を示す図である。図18は、スマートフォン50における駐車違反車両画面の表示例を示す図である。図19は、実施の形態2に係る駐車監視システムの動作手順の一例を示すシーケンス図である。なお、図19の説明において、図8または図16の説明と重複する内容については同一のステップ番号を付与して説明を簡略化または省略し、異なる内容について説明する。 Next, the operation procedure of the parking monitoring system 100 according to the second embodiment will be described with reference to FIGS. 16 to 19. FIG. 16 is a flowchart showing an example of the operation procedure of the scenarios V2, V3, and V4 of FIG. FIG. 17 is a diagram showing a display example of a parking violation vehicle screen on the smartphone 50. FIG. 18 is a diagram showing a display example of a parking violation vehicle screen on the smartphone 50. FIG. 19 is a sequence diagram showing an example of the operation procedure of the parking monitoring system according to the second embodiment. In the description of FIG. 19, the content that overlaps with the description of FIG. 8 or FIG. 16 is given the same step number to simplify or omit the description, and different contents will be described.

図16および図19において、監視カメラCAは、駐車禁止エリアNPK1を含む全方位の撮像映像(撮像画像)をその位置情報(例えばGPS情報)ならびに撮像時刻の情報と対応付けて画像処理PC20に送信する(St1)。画像処理PC20は、監視カメラCAから送られた駐車禁止エリアNPK1を含む全方位の撮像映像(撮像画像)をその位置情報(例えばGPS情報)ならびに撮像時刻の情報と対応付けて受信して取得する(St1)。画像処理PC20は、監視カメラCAから送られた撮像映像を解析することで、駐車禁止エリアNPK1内の所定台数(例えば20台)分の駐車スペースのうち、空き駐車スペースが存在するか否かを判定(検知)する。また、画像処理PC20は、空き駐車スペースに車両が駐車しているか否かを判定(検知)する(St31)。画像処理PC20は、駐車禁止エリア内の空き駐車スペースに車両(例えば車両NCR1)が新たに駐車したと判定した場合に、その車両(例えば車両NCR1)に関する情報を解析して抽出する(St31)。この車両NCR1に関する情報は、例えば車両NCR1の駐車した駐車スペースの位置情報、車両NCR1の車色情報、監視カメラCAから送られた撮像映像中の車両NCR1の部分を切り出した部分的な撮像画像のデータを含み、以下では便宜的に「駐車車両情報」という。画像処理PC20は、ステップSt11において得られた駐車車両情報をクラウドサーバ30に通知(送信)する(St32)。 In FIGS. 16 and 19, the surveillance camera CA transmits an omnidirectional captured image (captured image) including the parking prohibited area NPK1 to the image processing PC 20 in association with its position information (for example, GPS information) and imaging time information. (St1). The image processing PC 20 receives and acquires an omnidirectional captured image (captured image) including the parking prohibited area NPK1 sent from the surveillance camera CA in association with its position information (for example, GPS information) and imaging time information. (St1). The image processing PC 20 analyzes the captured image sent from the surveillance camera CA to determine whether or not there is an empty parking space among the parking spaces for a predetermined number (for example, 20) in the parking prohibited area NPK1. Judgment (detection). Further, the image processing PC 20 determines (detects) whether or not the vehicle is parked in the vacant parking space (St31). When it is determined that a vehicle (for example, vehicle NCR1) is newly parked in an empty parking space in a parking prohibited area, the image processing PC 20 analyzes and extracts information about the vehicle (for example, vehicle NCR1) (St31). The information about the vehicle NCR1 is, for example, the position information of the parked parking space of the vehicle NCR1, the vehicle color information of the vehicle NCR1, and the partially captured image obtained by cutting out the portion of the vehicle NCR1 in the captured image sent from the surveillance camera CA. Including data, it is referred to as "parked vehicle information" below for convenience. The image processing PC 20 notifies (transmits) the parked vehicle information obtained in step St11 to the cloud server 30 (St32).

クラウドサーバ30は、画像処理PC20から送られた駐車車両情報を受信してHDD37に蓄積(保存)する(St33)。ここで、駐車禁止エリア内に駐車された車両NCR1のドライバーが駐車禁止エリア内への駐車が予め許可されていない人物とする。この場合、実施の形態1とは異なり、その人物が所持するスマートフォン(例えば図6参照)により車両NCR1の撮像画像のデータとスマートフォンの現在の位置情報(言い換えると、車両NCR1の駐車位置情報)とが対応付けられてクラウドサーバ30には送信されない。一方、駐車禁止エリア内に駐車された車両NCR1のドライバーが駐車禁止エリア内への駐車が予め許可されている人物とする。この場合、実施の形態1と同様に、その人物が所持するスマートフォン50(図6参照)により車両NCR1の撮像画像のデータとスマートフォンの現在の位置情報(言い換えると、車両NCR1の駐車位置情報)とが対応付けられてクラウドサーバ30には送信される。 The cloud server 30 receives the parked vehicle information sent from the image processing PC 20 and stores (saves) it in the HDD 37 (St33). Here, it is assumed that the driver of the vehicle NCR1 parked in the parking prohibited area is a person who is not permitted to park in the parking prohibited area in advance. In this case, unlike the first embodiment, the data of the captured image of the vehicle NCR1 and the current position information of the smartphone (in other words, the parking position information of the vehicle NCR1) are obtained by the smartphone possessed by the person (see, for example, FIG. 6). Is associated with and is not transmitted to the cloud server 30. On the other hand, it is assumed that the driver of the vehicle NCR1 parked in the parking prohibited area is a person who is permitted to park in the parking prohibited area in advance. In this case, as in the first embodiment, the data of the captured image of the vehicle NCR1 and the current position information of the smartphone (in other words, the parking position information of the vehicle NCR1) are obtained by the smartphone 50 (see FIG. 6) possessed by the person. Are associated with each other and transmitted to the cloud server 30.

従って、クラウドサーバ30は、車両NCR1の撮像画像のデータとスマートフォンの現在の位置情報(言い換えると、車両NCR1の駐車位置情報)とを受信しない場合、ステップSt33において受信された車両NCR1の駐車車両情報と車両NCR1の撮像画像およびスマートフォンの位置情報とを比較することができない。この場合には、クラウドサーバ30は、車両NCR1を駐車した人物は駐車禁止エリア内への駐車が予め許可された人物ではない(言い換えると、車両NCR1の駐車は駐車違反である)と判断する(St34)。クラウドサーバ30は、車両NCR1の駐車違反を判断(検知)すると、その駐車違反が発生した旨を含む駐車違反車両情報をHDD37の駐車車両情報37bとして記録するとともに、管理者PC70および外部機関PC80に通知する(St35)。また、クラウドサーバ30は、駐車違反が発生した旨を含む駐車違反車両情報を、管理者PC70に対応する管理者が所持するスマートフォン(図6参照)、外部機関PC80に対応する外部機関の担当者(例えば、自治体の担当官、警察署の警察官)が所持するスマートフォンに通知してもよい。駐車違反車両情報は、例えば、駐車禁止エリアの位置情報(例えば監視カメラCAの位置情報に対応するGPS情報)および道路地図データ、駐車違反を行った車両の台数、車両NCR1の部分が枠WK1(つまり、駐車判定枠)付きで切り出された部分的な撮像画像のデータを含む。これにより、駐車監視システム100の管理者および外部機関(例えば警察署)の担当者はそれぞれ、車両NCR1の駐車違反が発生したことを、ディスプレイDP2,XP3またはスマートフォン50に表示される表示画面(図17,図18参照)を介して把握できる。また、駐車監視システム100の管理者および外部機関(例えば警察署)の担当者はそれぞれ、駐車違反を行った車両NCR1の取り締まりを迅速に行えるので、駐車禁止エリアNPK1内への駐車が予め許可された人物の車両の駐車の阻害を抑制でき、サービス会員の利便性を向上できる。 Therefore, when the cloud server 30 does not receive the data of the captured image of the vehicle NCR1 and the current position information of the smartphone (in other words, the parking position information of the vehicle NCR1), the parked vehicle information of the vehicle NCR1 received in step St33. And the captured image of the vehicle NCR1 and the position information of the smartphone cannot be compared. In this case, the cloud server 30 determines that the person who parked the vehicle NCR1 is not a person who is previously permitted to park in the parking prohibited area (in other words, parking the vehicle NCR1 is a parking violation) (in other words, parking of the vehicle NCR1 is a parking violation). St34). When the cloud server 30 determines (detects) a parking violation of the vehicle NCR1, the cloud server 30 records the parking violation vehicle information including the fact that the parking violation has occurred as the parking vehicle information 37b of the HDD 37, and records the parking violation vehicle information 37b in the administrator PC 70 and the external organization PC 80. Notify (St35). In addition, the cloud server 30 provides parking violation vehicle information including the occurrence of a parking violation to a smartphone (see FIG. 6) possessed by the administrator corresponding to the administrator PC 70 and a person in charge of an external organization corresponding to the external organization PC 80. (For example, a local government official, a police officer at a police station) may notify a smartphone possessed by the person. The parking violation vehicle information includes, for example, the position information of the parking prohibited area (for example, GPS information corresponding to the position information of the surveillance camera CA) and road map data, the number of vehicles that have committed a parking violation, and the vehicle NCR1 part is the frame WK1 (for example). That is, it includes the data of the partially captured image cut out with the parking determination frame). As a result, the manager of the parking monitoring system 100 and the person in charge of an external organization (for example, a police station) each indicate on the display DP2, XP3 or the smartphone 50 that the parking violation of the vehicle NCR1 has occurred (Fig. It can be grasped through 17, and FIG. 18). In addition, since the manager of the parking monitoring system 100 and the person in charge of an external organization (for example, a police station) can quickly crack down on the vehicle NCR1 that has committed a parking violation, parking in the parking prohibited area NPK1 is permitted in advance. It is possible to suppress the obstruction of parking of a person's vehicle and improve the convenience of service members.

図17には、図16および図19のステップSt35においてクラウドサーバ30から通知された駐車違反車両情報に基づいて、外部機関PC80に対応する外部機関(例えば、警察署)から出動した警察官が所持するスマートフォン50により生成された駐車違反車両画面の一例が示されている。この駐車違反車両画面では、スマートフォン50は、車両NCR1の部分が枠WK1(つまり、駐車判定枠)付きで切り出された部分的な撮像画像IMG1のデータと、車両NCR1の駐車位置PS1(例えばGPS情報)と、車両NCR1の駐車違反が開始された旨、その年月日および時刻の情報NTB2とを表示する。これにより、スマートフォン50を所持する担当者(例えば、警察官)は、スマートフォン50に表示された駐車違反車両画面(図17参照)を閲覧することで、駐車禁止エリアNPK1への駐車が許可されていない人物による車両NCR1の駐車違反が発生したことを視覚的かつ簡易に把握でき、迅速にその駐車違反の取り締まりを実行できる。 FIG. 17 is possessed by a police officer dispatched from an external organization (for example, a police station) corresponding to the external organization PC80 based on the parking violation vehicle information notified from the cloud server 30 in step St35 of FIGS. 16 and 19. An example of a parking violation vehicle screen generated by the smartphone 50 is shown. In this parking violation vehicle screen, the smartphone 50 has the data of the partially captured image IMG1 in which the portion of the vehicle NCR1 is cut out with the frame WK1 (that is, the parking determination frame), and the parking position PS1 of the vehicle NCR1 (for example, GPS information). ) And the information NTB2 of the date and time that the parking violation of the vehicle NCR1 has started is displayed. As a result, the person in charge of possessing the smartphone 50 (for example, a police officer) is permitted to park in the parking prohibited area NPK1 by viewing the parking violation vehicle screen (see FIG. 17) displayed on the smartphone 50. It is possible to visually and easily grasp that a parking violation of the vehicle NCR1 has occurred by a non-existent person, and to quickly crack down on the parking violation.

図18には、図16および図19のステップSt35においてクラウドサーバ30から通知された駐車違反車両情報に基づいて、外部機関PC80に対応する外部機関(例えば、警察署)から出動した警察官が所持するスマートフォン50により生成された駐車違反車両画面の他の一例が示されている。この駐車違反車両画面では、スマートフォン50は、駐車禁止エリアNPK1の位置PS2を含む道路地図データMP1と、駐車禁止エリアNPK1の位置PS2に駐車違反を行っている車両の台数に関する情報NB1とを表示する。これにより、スマートフォン50を所持する担当者(例えば、警察官)は、スマートフォン50に表示された駐車違反車両画面(図18参照)を閲覧することで、駐車禁止エリアNPK1への駐車が許可されていない複数の人物による車両(例えば2台の車両)の駐車違反が発生したことを視覚的かつ簡易に把握でき、道路地図データMP1を閲覧しながら迅速にその駐車違反の現場に急行して取り締まりを実行できる。 FIG. 18 is possessed by a police officer dispatched from an external organization (for example, a police station) corresponding to the external organization PC80 based on the parking violation vehicle information notified from the cloud server 30 in step St35 of FIGS. 16 and 19. Another example of a parking violation vehicle screen generated by the smartphone 50 is shown. On this parking violation vehicle screen, the smartphone 50 displays road map data MP1 including the position PS2 of the parking prohibited area NPK1 and information NB1 regarding the number of vehicles committing a parking violation at the position PS2 of the parking prohibited area NPK1. .. As a result, the person in charge of possessing the smartphone 50 (for example, a police officer) is permitted to park in the parking prohibited area NPK1 by viewing the parking violation vehicle screen (see FIG. 18) displayed on the smartphone 50. It is possible to visually and easily grasp the occurrence of a parking violation of a vehicle (for example, two vehicles) by multiple people, and while browsing the road map data MP1, quickly rush to the site of the parking violation and crack down on it. Can be done.

以上により、実施の形態2に係る駐車監視システム100は、駐車禁止エリアを撮像可能に設置された監視カメラCAと映像処理装置(例えば、画像処理PC20およびクラウドサーバ30)が通信可能に接続される。監視カメラCAは、駐車禁止エリアの撮像映像を映像処理装置に繰り返し送信する。映像処理装置(例えば、画像処理PC20)は、監視カメラCAから送られた撮像映像に基づいて、駐車禁止エリアにおける車両の駐車の有無を検知する。映像処理装置(例えば、クラウドサーバ30)は、駐車禁止エリアにおける車両の駐車を検知した場合に、駐車違反の検知通知を外部端末に送信する。 As described above, in the parking monitoring system 100 according to the second embodiment, the surveillance camera CA installed so as to be able to image the parking prohibited area and the video processing device (for example, the image processing PC 20 and the cloud server 30) are communicably connected to each other. .. The surveillance camera CA repeatedly transmits the captured image of the parking prohibited area to the image processing device. The image processing device (for example, the image processing PC 20) detects whether or not the vehicle is parked in the parking prohibited area based on the captured image sent from the surveillance camera CA. When the video processing device (for example, the cloud server 30) detects the parking of the vehicle in the parking prohibited area, the video processing device (for example, the cloud server 30) transmits a parking violation detection notification to the external terminal.

これにより、駐車監視システム100は、監視対象のエリア(例えば、駐車禁止エリア)に空き状態の駐車スペースが存在する場合に、予め許可された人物の車両が駐車したか否かを的確に判別できるので、その駐車禁止エリアにおける駐車の効果的な取り締まりを支援することができる。 As a result, the parking monitoring system 100 can accurately determine whether or not a vehicle of a person permitted in advance has parked when there is an empty parking space in the area to be monitored (for example, a parking prohibited area). Therefore, it is possible to support an effective crackdown on parking in the no-parking area.

また、監視カメラCAは、駐車禁止エリアの位置情報に対応する監視カメラCAの位置情報を撮像映像とともに映像処理装置(例えば、画像処理PC20)に送信する。映像処理装置(例えば、画像処理PC20)は、監視カメラCAの位置情報を含めて駐車違反の検知通知を送信する。これにより、例えばスマートフォン50を所持するシステムの管理者または外部機関の担当者(例えば、自治体の担当官、警察署の警察官)は、車両NCR1の駐車違反が発生したことを、ディスプレイDP2,XP3またはスマートフォン50に表示される表示画面(図17,図18参照)を介して把握できる。また、駐車監視システム100の管理者および外部機関(例えば警察署)の担当者はそれぞれ、駐車違反を行った車両NCR1の取り締まりを迅速に行えるので、駐車禁止エリアNPK1内への駐車が予め許可された人物の車両の駐車の阻害を抑制でき、サービス会員の利便性を向上できる。 Further, the surveillance camera CA transmits the position information of the surveillance camera CA corresponding to the position information of the parking prohibited area to the image processing device (for example, the image processing PC 20) together with the captured image. The image processing device (for example, the image processing PC 20) transmits a parking violation detection notification including the position information of the surveillance camera CA. As a result, for example, the administrator of the system possessing the smartphone 50 or the person in charge of an external organization (for example, the person in charge of the local government or the police officer of the police station) can tell that the parking violation of the vehicle NCR1 has occurred. Alternatively, it can be grasped through the display screen (see FIGS. 17 and 18) displayed on the smartphone 50. In addition, since the manager of the parking monitoring system 100 and the person in charge of an external organization (for example, a police station) can quickly crack down on the vehicle NCR1 that has committed a parking violation, parking in the parking prohibited area NPK1 is permitted in advance. It is possible to suppress the obstruction of parking of a person's vehicle and improve the convenience of service members.

また、映像処理装置(例えば、クラウドサーバ30)は、少なくとも駐車禁止エリアに駐車違反した車両の位置情報を外部端末(例えばスマートフォン50)に表示させる。これにより、スマートフォン50を所持する担当者(例えば、警察官)は、スマートフォン50に表示された駐車違反車両画面(図18参照)を閲覧することで、駐車禁止エリアNPK1への駐車が許可されていない複数の人物による車両(例えば2台の車両)の駐車違反が発生したことを視覚的かつ簡易に把握でき、道路地図データMP1を閲覧しながら迅速にその駐車違反の現場に急行して取り締まりを実行できる。 Further, the video processing device (for example, the cloud server 30) causes an external terminal (for example, a smartphone 50) to display the position information of the vehicle that violated parking at least in the parking prohibited area. As a result, the person in charge of possessing the smartphone 50 (for example, a police officer) is permitted to park in the parking prohibited area NPK1 by viewing the parking violation vehicle screen (see FIG. 18) displayed on the smartphone 50. It is possible to visually and easily grasp the occurrence of a parking violation of a vehicle (for example, two vehicles) by multiple people, and while browsing the road map data MP1, quickly rush to the site of the parking violation and crack down on it. Can be done.

以上、図面を参照しながら各種の実施の形態について説明したが、本開示はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上述した各種の実施の形態における各構成要素を任意に組み合わせてもよい。 Although various embodiments have been described above with reference to the drawings, it goes without saying that the present disclosure is not limited to such examples. It is clear that a person skilled in the art can come up with various modifications, modifications, substitutions, additions, deletions, and even examples within the scope of the claims. It is understood that it naturally belongs to the technical scope of the present disclosure. Further, each component in the various embodiments described above may be arbitrarily combined as long as the gist of the invention is not deviated.

なお、上述した実施の形態1,2では、本開示に係る駐車監視システムを構成する映像処理装置として画像処理PC20およびクラウドサーバ30の別体の構成として設けられるとして説明したが、画像処理PC20およびクラウドサーバ30の構成や動作がいずれかの装置に一体化された構成(映像処理装置)としても同様に適用可能である。つまり、この映像処理装置は、画像処理PC20およびクラウドサーバ30のいずれの構成を有し、それぞれの動作を実行可能に構成されてよい。これにより、駐車監視システム100のシステム構成がより簡略化できる。 Although the above-described first and second embodiments have been described as being provided as a separate configuration of the image processing PC 20 and the cloud server 30 as the video processing device constituting the parking monitoring system according to the present disclosure, the image processing PC 20 and the image processing PC 20 and the cloud server 30 have been described as being provided separately. It is also applicable as a configuration (image processing device) in which the configuration and operation of the cloud server 30 are integrated into any of the devices. That is, the video processing apparatus may have either the configuration of the image processing PC 20 or the cloud server 30, and may be configured to be able to execute each operation. As a result, the system configuration of the parking monitoring system 100 can be further simplified.

本開示は、駐車スペースに駐車する前の時点で空き状態の駐車スペースの有無を検知してドライバー等のユーザ端末に通知し、ユーザが乗車する車両の駐車を適切に支援し、ユーザの利便性を向上する駐車場監視システム、駐車場監視方法および記録媒体として有用である。 The present disclosure detects the presence or absence of an empty parking space before parking in the parking space, notifies the user terminal such as a driver, appropriately supports the parking of the vehicle on which the user rides, and is convenient for the user. It is useful as a parking lot monitoring system, a parking lot monitoring method and a recording medium to improve.

11 プロセッサ
12 ROM
13 RAM
14 キーボード
15 マウス
16 入出力I/F
17 HDD
19 通信部
20 画像処理PC
30 クラウドサーバ
31 プロセッサ
32 ROM
33 RAM
37 HDD
39 通信部
41 CPU
42 通信部
44 電源管理部
45 イメージセンサ
46 メモリ
46x メモリカード
46y RAM
46z ROM
47 ネットワークコネクタ
50 スマートフォン
70 管理者PC
80 外部機関PC
100 駐車監視システム
501 携帯電話網通信I/F部
502 携帯電話網通信プロトコル制御部
503 表示/操作部
504 記憶部
505 音声入出力制御部
506 制御部
507 無線LAN制御部
508 無線LAN通信I/F部
509 撮像部
511 USB通信I/F部
512 MIC(マイク)
513 SPK(スピーカ)
515 音声バス
550 2次電池
CA 監視カメラ
DP1 ディスプレイ
DP2 ディスプレイ
DP3 ディスプレイ
NW1、NW2 ネットワーク網
11 processor 12 ROM
13 RAM
14 Keyboard 15 Mouse 16 I / O I / F
17 HDD
19 Communication unit 20 Image processing PC
30 Cloud server 31 Processor 32 ROM
33 RAM
37 HDD
39 Communication unit 41 CPU
42 Communication unit 44 Power management unit 45 Image sensor 46 Memory 46x Memory card 46y RAM
46z ROM
47 Network connector 50 Smartphone 70 Administrator PC
80 External organization PC
100 Parking monitoring system 501 Mobile phone network communication I / F unit 502 Mobile phone network communication protocol control unit 503 Display / operation unit 504 Storage unit 505 Voice input / output control unit 506 Control unit 507 Wireless LAN control unit 508 Wireless LAN communication I / F Unit 509 Imaging unit 511 USB communication I / F unit 512 MIC (mic)
513 SPK (speaker)
515 Voice bus 550 Secondary battery CA Surveillance camera DP1 Display DP2 Display DP3 Display NW1, NW2 Network network

Claims (10)

駐車場を撮像可能に設置されたカメラと映像処理装置とが通信可能に接続された駐車監視システムであって、
前記カメラは、
前記駐車場の撮像映像を前記映像処理装置に繰り返し送信し、
前記映像処理装置は、
前記カメラから送られた前記撮像映像に基づいて、前記駐車場における車両の空き駐車スペースの有無を検知し、前記空き駐車スペースを検知した場合に、前記空き駐車スペースの検知通知を少なくとも1台のユーザ端末に送信し、
前記カメラから送られた前記撮像映像に基づいて、前記空き駐車スペースに駐車した駐車車両に関する情報を解析し、解析された前記駐車車両に関する情報と、前記空き駐車スペースに車両を駐車させたユーザが所持するユーザ端末から送られた車両情報とのマッチングに応じて、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定し、駐車開始の旨を前記ユーザのユーザ端末に送信する、
駐車監視システム。
It is a parking monitoring system in which a camera installed so that a parking lot can be imaged and a video processing device are connected so as to be able to communicate with each other.
The camera
The captured image of the parking lot is repeatedly transmitted to the image processing device, and the image is transmitted to the image processing device repeatedly.
The video processing device is
Based on the captured image sent from the camera, the presence or absence of an empty parking space of a vehicle in the parking lot is detected, and when the empty parking space is detected, at least one notification of the detection of the empty parking space is given. Send to the user terminal
Based on the captured image sent from the camera, the information about the parked vehicle parked in the vacant parking space is analyzed, and the analyzed information about the parked vehicle and the user who parked the vehicle in the vacant parking space According to the matching with the vehicle information sent from the possessed user terminal, the parking of the user's vehicle in the vacant parking space is determined, and the parking start is transmitted to the user terminal of the user .
Parking monitoring system.
前記カメラは、
前記駐車場の位置情報に対応する前記カメラの位置情報を前記撮像映像とともに前記映像処理装置に送信し、
前記映像処理装置は、
前記カメラの位置情報を含めて前記空き駐車スペースの検知通知を前記ユーザ端末に送信する、
請求項1に記載の駐車監視システム。
The camera
The position information of the camera corresponding to the position information of the parking lot is transmitted to the image processing device together with the captured image.
The video processing device is
A notification of detection of the vacant parking space including the position information of the camera is transmitted to the user terminal .
The parking monitoring system according to claim 1.
前記映像処理装置は、
複数のユーザ端末のそれぞれから繰り返して送信される位置情報を受信し、
前記複数のユーザ端末のそれぞれの位置情報と前記カメラの位置情報とに基づいて、前記カメラの位置情報の近傍に存在する前記少なくとも1台のユーザ端末に、前記空き駐車スペースの検知通知を能動的に送信する、
請求項2に記載の駐車監視システム。
The video processing device is
Receives location information that is repeatedly transmitted from each of multiple user terminals,
Based on the position information of each of the plurality of user terminals and the position information of the camera, the at least one user terminal existing in the vicinity of the position information of the camera is actively notified of the detection of the vacant parking space. Send to,
The parking monitoring system according to claim 2.
前記映像処理装置は、
少なくとも前記空き駐車スペースの位置情報を前記ユーザ端末に表示させる、
請求項1に記載の駐車監視システム。
The video processing device is
At least the location information of the vacant parking space is displayed on the user terminal.
The parking monitoring system according to claim 1.
前記映像処理装置は、
解析された前記駐車車両に関する情報に含まれる位置情報および車色情報と、前記車両情報に含まれる車両の位置情報および車色情報とが略一致した場合に、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定する、
請求項に記載の駐車監視システム。
The video processing device is
When the position information and vehicle color information included in the analyzed information about the parked vehicle and the vehicle position information and vehicle color information included in the vehicle information substantially match, the user's vehicle in the empty parking space Judging the parking of
The parking monitoring system according to claim 1 .
前記映像処理装置は、
少なくとも前記空き駐車スペースの駐車開始の旨と駐車開始時刻とを前記ユーザ端末に表示させる、
請求項に記載の駐車監視システム。
The video processing device is
At least the fact that parking of the vacant parking space has started and the parking start time are displayed on the user terminal.
The parking monitoring system according to claim 1 .
前記映像処理装置は、
前記カメラから送られた前記撮像映像に基づいて、前記駐車車両が駐車していた駐車スペースが空き駐車スペースになったことの検知に応じて、前記駐車車両の駐車の終了を判定し、駐車終了の旨を前記駐車車両に対応するユーザのユーザ端末に送信する、
請求項に記載の駐車監視システム。
The video processing device is
Based on the captured image sent from the camera, the parking end of the parked vehicle is determined according to the detection that the parking space in which the parked vehicle is parked has become an empty parking space, and the parking end is determined. Is transmitted to the user terminal of the user corresponding to the parked vehicle.
The parking monitoring system according to claim 1 .
前記映像処理装置は、
前記駐車車両の駐車開始時刻から駐車終了時刻までの期間に応じた課金計算を行い、前記課金計算に基づく課金情報を対応する前記ユーザ端末に表示させる、
請求項に記載の駐車監視システム。
The video processing device is
The billing calculation is performed according to the period from the parking start time to the parking end time of the parked vehicle, and the billing information based on the billing calculation is displayed on the corresponding user terminal.
The parking monitoring system according to claim 7 .
駐車場を撮像可能に設置されたカメラと映像処理装置とが通信可能に接続された駐車監視システムにおける駐車監視方法であって、
前記カメラは、
前記駐車場の撮像映像を前記映像処理装置に繰り返し送信し、
前記映像処理装置は、
前記カメラから送られた前記撮像映像に基づいて、前記駐車場における車両の空き駐車スペースの有無を検知し、前記空き駐車スペースを検知した場合に、前記空き駐車スペースの検知通知を少なくとも1台のユーザ端末に送信し、
前記カメラから送られた前記撮像映像に基づいて、前記空き駐車スペースに駐車した駐車車両に関する情報を解析し、解析された前記駐車車両に関する情報と、前記空き駐車スペースに車両を駐車させたユーザが所持するユーザ端末から送られた車両情報とのマッチングに応じて、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定し、駐車開始の旨を前記ユーザのユーザ端末に送信する、
駐車監視方法。
It is a parking monitoring method in a parking monitoring system in which a camera installed so as to be able to image a parking lot and a video processing device are connected so as to be able to communicate with each other.
The camera
The captured image of the parking lot is repeatedly transmitted to the image processing device, and the image is transmitted to the image processing device repeatedly.
The video processing device is
Based on the captured image sent from the camera, the presence or absence of an empty parking space of a vehicle in the parking lot is detected, and when the empty parking space is detected, at least one notification of the detection of the empty parking space is given. Send to the user terminal
Based on the captured image sent from the camera, the information about the parked vehicle parked in the vacant parking space is analyzed, and the analyzed information about the parked vehicle and the user who parked the vehicle in the vacant parking space According to the matching with the vehicle information sent from the possessed user terminal, the parking of the user's vehicle in the vacant parking space is determined, and the parking start is transmitted to the user terminal of the user .
Parking monitoring method.
駐車場を撮像可能に設置されたカメラと通信可能に接続された、コンピュータである映像処理装置に、
前記カメラから繰り返し送られた前記駐車場の撮像映像に基づいて、前記駐車場における車両の空き駐車スペースの有無を検知する手順と、
前記空き駐車スペースが検知された場合に、前記空き駐車スペースの検知通知を少なくとも1台のユーザ端末に送信する手順と、
前記カメラから送られた前記撮像映像に基づいて、前記空き駐車スペースに駐車した駐車車両に関する情報を解析する手順と、
解析された前記駐車車両に関する情報と、前記空き駐車スペースに車両を駐車させたユーザが所持するユーザ端末から送られた車両情報とのマッチングに応じて、前記空き駐車スペースにおける前記ユーザの車両の駐車を判定し、駐車開始の旨を前記ユーザのユーザ端末に送信する手順と、を実現させるためのプログラムを記録した、
コンピュータ読み取り可能な記録媒体。
To a video processing device that is a computer connected to a camera installed so that the parking lot can be imaged.
A procedure for detecting the presence or absence of an empty parking space for a vehicle in the parking lot based on images of the parking lot repeatedly sent from the camera, and a procedure for detecting the presence or absence of an empty parking space for the vehicle in the parking lot.
When the vacant parking space is detected, the procedure for transmitting the detection notification of the vacant parking space to at least one user terminal and the procedure.
A procedure for analyzing information about a parked vehicle parked in the vacant parking space based on the captured image sent from the camera, and a procedure for analyzing the information.
According to the matching between the analyzed information about the parked vehicle and the vehicle information sent from the user terminal possessed by the user who parked the vehicle in the vacant parking space, the parking of the user's vehicle in the vacant parking space is performed. And recorded a program for realizing the procedure of determining and transmitting the parking start to the user terminal of the user .
Computer-readable recording medium.
JP2018085573A 2018-04-26 2018-04-26 Parking monitoring system, parking monitoring method and recording medium Active JP7081972B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018085573A JP7081972B2 (en) 2018-04-26 2018-04-26 Parking monitoring system, parking monitoring method and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018085573A JP7081972B2 (en) 2018-04-26 2018-04-26 Parking monitoring system, parking monitoring method and recording medium

Publications (2)

Publication Number Publication Date
JP2019192025A JP2019192025A (en) 2019-10-31
JP7081972B2 true JP7081972B2 (en) 2022-06-07

Family

ID=68390352

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018085573A Active JP7081972B2 (en) 2018-04-26 2018-04-26 Parking monitoring system, parking monitoring method and recording medium

Country Status (1)

Country Link
JP (1) JP7081972B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102323917B1 (en) * 2020-10-13 2021-11-09 주식회사 세연테크 System for unmanned parking management using an image surveillance apparatus and method thereof
CN112861701B (en) * 2021-02-04 2023-09-22 北京百度网讯科技有限公司 Illegal parking identification method, device, electronic equipment and computer readable medium
JP7341182B2 (en) * 2021-04-16 2023-09-08 本田技研工業株式会社 Servers, mobile terminals, parking management methods, and programs
JP7439013B2 (en) * 2021-04-16 2024-02-27 本田技研工業株式会社 Server, parking management system, parking management method, and program
JP2022164294A (en) * 2021-04-16 2022-10-27 本田技研工業株式会社 Parking management system, server, parking management method, and program
JP7399131B2 (en) * 2021-04-16 2023-12-15 本田技研工業株式会社 Servers, mobile terminals, parking management methods, and programs
JP7456969B2 (en) * 2021-04-16 2024-03-27 本田技研工業株式会社 Server, mobile terminal, parking management method, and program
JP2022164296A (en) * 2021-04-16 2022-10-27 本田技研工業株式会社 Parking management system, mobile terminal, parking management method, and program
WO2023047700A1 (en) * 2021-09-21 2023-03-30 パナソニックIpマネジメント株式会社 Information providing method and information display program

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004110463A (en) 2002-09-19 2004-04-08 Nec Fielding Ltd Parking management system
JP2004280215A (en) 2003-03-13 2004-10-07 Fujitsu Access Ltd Fee settlement system and fee settlement method
JP2009051473A (en) 2007-08-29 2009-03-12 Denso Corp Parking assistant system
JP2009064276A (en) 2007-09-06 2009-03-26 Toyota Motor Corp Parking guide system
WO2017168754A1 (en) 2016-04-01 2017-10-05 三菱電機株式会社 Automatic parking system, automatic parking control device, and automatic parking control method
WO2017205941A1 (en) 2016-06-03 2017-12-07 Iomniscient Pty Ltd A system and method for the control of vehicle operations

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004110463A (en) 2002-09-19 2004-04-08 Nec Fielding Ltd Parking management system
JP2004280215A (en) 2003-03-13 2004-10-07 Fujitsu Access Ltd Fee settlement system and fee settlement method
JP2009051473A (en) 2007-08-29 2009-03-12 Denso Corp Parking assistant system
JP2009064276A (en) 2007-09-06 2009-03-26 Toyota Motor Corp Parking guide system
WO2017168754A1 (en) 2016-04-01 2017-10-05 三菱電機株式会社 Automatic parking system, automatic parking control device, and automatic parking control method
WO2017205941A1 (en) 2016-06-03 2017-12-07 Iomniscient Pty Ltd A system and method for the control of vehicle operations

Also Published As

Publication number Publication date
JP2019192025A (en) 2019-10-31

Similar Documents

Publication Publication Date Title
JP7081972B2 (en) Parking monitoring system, parking monitoring method and recording medium
US10977917B2 (en) Surveillance camera system and surveillance method
US10971007B2 (en) Road condition information sharing method
US10467897B2 (en) Investigation assist system and investigation assist method
US8125530B2 (en) Information recording system, information recording device, information recording method, and information collecting program
JP6750998B2 (en) Monitoring system and monitoring method
JP2018061216A (en) Information display system and information display method
JP6047910B2 (en) Monitoring device and monitoring center
JP2011215767A (en) Server device, method of using security camera images, program for using security camera images, and security camera system
KR101477523B1 (en) A corporative image recording system using vehicle-to-vehicle communications and the method thereof
JP2010220189A (en) Image capturing apparatus and moving image distribution system
JP2018190199A (en) Monitor device and crime prevention system
EP3948817A1 (en) High-priority event generation and reporting for camera-based security system
KR102054930B1 (en) Method and apparatus for sharing picture in the system
KR101424740B1 (en) A black-box apparatus for sharing recorded images between buddy vehicles and the sharing method by using the same
KR101420006B1 (en) System and Method for Camera Image Service based on Distributed Processing
JP7428682B2 (en) Investigation support system and investigation support method
KR101477913B1 (en) Black box for vehicle having event notifying function over wifi communication
JP2019040368A (en) Image search assisting device and image search assisting method
KR102093650B1 (en) Security service system and method based on cloud
KR20140056674A (en) Commnication service system, method and apparatus for supporting process of accident in the system
KR20130047439A (en) Apparatus and method for collecting information
JP5115572B2 (en) Camera management server, security service management method, and security service management program
KR101515944B1 (en) System and method for protecting citizens safety using black-box
CN110519562B (en) Motion detection method, device and system

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20190731

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20191205

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20201224

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220309

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220526

R150 Certificate of patent or registration of utility model

Ref document number: 7081972

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350